AI在手机等智能终端上的应用深化,是当前的大势所趋。
过去几年,高通一直致力于将人工智能技术应用于智能手机。从年起,高通发布了骁龙神经处理引擎SDK,吹响了向终端侧人工智能进军的号角。
今年2月,高通推出了人工智能引擎(AIEngine,以下简称AIE),让人工智能在终端侧的应用更加快速、高效。
高通作为移动芯片的霸主,在AI和智能终端的结合上拥有天然的优势。据高通总裁阿蒙介绍,过去12个月内,高通平台上实现了%的人工智能性能提升。
除了算力的提升,5G商用的迫近也将加速人工智能向终端的迁移。而在5G上的技术积累上,高通处于遥遥领先的位置。阿蒙表示,未来,高通将和众多运营商合作构建5G网络边缘的计算能力。
过去的训练、推理,大量依赖于云端的算力,而5G时代的到来,凭借高速率和低时延的特性,将进一步释放边缘计算的潜力,让所有的边缘终端都将具备机器学习能力。
终端侧的智能,不仅可以更及时地响应用户指令,个人信息更加安全,更重要的是,可以提供个性化的用户体验,针对所处的场景进行自主学习,让身边的终端变得更加“懂你”。
未来的人工智能,云端和终端将并行发展。终端侧的人工智能,可以让数据处理在最靠近数据源的位置处理,和云端形成互补。
与此同时,5G还可以将两者打通,将各个终端联接在5G网络当中,从而实现万物互联互通,最大限度地释放终端侧智能的能量。
现在,高通正不断推出AI相关的新产品,拓展与终端厂商的合作,让AI的深度应用逐渐成为终端的标配。
AIE“家族”再添新成员
AIE是高通推动人工智能终端侧应用的核心。
目前,高通旗下芯片产品骁龙、骁龙、骁龙、骁龙等,都已支持AIE。现在,一个新成员加入了这个行列——骁龙移动平台。24日的高通人工智能创新论坛,高通发布了这款产品。
目前,包括小米、一加、vivo、OPPO、华硕、锤子、黑鲨在内的众多厂商,都在其产品中融合了高通的AIE。骁龙的推出为硬件厂商提供了更丰富的选择。
骁龙是骁龙系列产品组合中的首款移动平台,基于10纳米制程,集成多核人工智能引擎,并具备神经网络处理能力。
骁龙可以提升手机在AI、拍摄、显示、连接多方面的性能。与骁龙相比,骁龙在AI应用中实现了2倍的整体性能提升。
相机是当前主流手机比拼的最大卖点,也是AI应用的主要场景之一。相比于的SpectraISP,骁龙的SpectraISP分辨率有所提升,支持最高3万像素单相机和最高双0万像素相机;并延续了出色的弱光拍摄、降噪、快速自动对焦、平滑变焦和实时背景虚化特效等功能。
值得一提的是,骁龙还具备4KHDR播放功能,支持观看HDR视频和应用,从而让视频具备更好的亮度、色域和色深。这是骁龙顶配系列之外首次支持该功能。
此外,连接的性能也得以优化,加入了骁龙X15LTE调制解调器,支持高达Mbps的下载速率。4x4MIMO技术的加持,在信号强度较弱的条件下可提高下载速度达70%。
除了算法上的提升,的全新架构也让能耗的利用变得更加高效。对于终端侧的AI,能耗是一个必须解决的问题。与相比,搭载的终端,在游戏和播放4KHDR视频时,可降低40%的功耗,在传输视频时,则可降低功耗达20%。
平台24日起开始提供,搭载的消费终端预计将在今年二季度上市。
宣布多项合作,让AIE赋能更多终端厂商
随着5G时代的迫近、物联网的拓展,AI赋能终端的前景,将拥有更加丰富的想象空间。
在这个过程中,AI引擎将与大量的终端应用进行结合。随着越来越多的厂商采用高通的AIE,AIE也将成为真正的AI底层平台,从而在AI引擎的比拼中脱颖而出。
24日的人工智能创新论坛上,除了的发布外,高通还宣布了与百度PaddlePaddle、网易有道和创通联达的合作。AIE家族不仅增加了新的成员,还将应用到更多厂商的终端当中。
我们分别来看下具体内容。
首先是百度与高通的合作。双方将利用AIE,通过ONNX交换格式,来推动实现百度PaddlePaddle开源深度学习框架模型,在骁龙平台上的转换与应用。这将帮助全球开发者和OEM厂商,更轻松地在搭载骁龙平台的终端上开发AI的相关特性。
PaddlePaddle是百度在年自主研发的深度学习平台,初期用于支持百度内部各项业务,年8月底,百度开源了PaddlePaddle。在今年2月,百度表示计划全面支持高通的AIE及其生态系统。
与网易有道的合作则是聚焦于AR性能的提升。双方将利用AIE,加速有道实景AR翻译功能,在部分骁龙移动平台上的实现。
值得注意的是,这是该功能首次在Android平台实现应用。如下图所示,用户打开有道翻译官,将手机摄像头对准文字内容,就可以实现中英日韩的实景AR翻译。整个过程不需要进行拍照,也不需要云端处理。
随着终端软硬件的升级,本地化AI将应用于越来越多的场景。AIE可以加速终端侧的深度神经网络运行速率,让终端侧的应用具备更强的实用性。
有道实景AR翻译为例。与AIE的融合,让前者的识别速度提升了10倍以上,动态追踪的范围也大大增加,从原来的0.3—0.5cm提升至3cm,识别的准确度也得到提升。
与创通联达的合作则是为了帮助开发者,提升硬件的智能化程度。这一合作将帮助中国开发者打造AI本地化性能更好的硬件产品,比如工厂控制器、汽车配件、零售摄像头和机器人等。
基于这项合作,创通联达将推出一款AI开发套件——TurboXAIDeveloperKit。TurboX计划包含支持多种用例的参考AI应用和模型,如物体识别、缺陷检测、场景检测及宠物识别。此外,它还将采用模组化设计,支持扩展AI和拍摄功能。
成立AIResearch,深化基础研究
人工智能之争很大程度上就是技术积累的竞争。因此,虽然面向应用的新产品虽然更容易博人眼球,但是基础研究的重要性同样不可忽视。早在7年,高通就启动了第一个人工智能研究项目。过去两年,高通把人工智能的重点聚焦在移动行业的发展。
除了平台和上述合作外,高通还宣布成立Qual