智东西(公众号:zhidxcom
| 轩窗

智东西12月4日消息,今天联发科在北京举办AI算力技术沟通会,会上针对下周四将在深圳发布的NeuroPilot v2.0以及搭载这一技术的芯片Helio P90的一些信息进行了剧透。其中,涉及NeuroPilot v2.0在硬件、软件和深度学习网络优化三个方面的升级优化内容,核心亮点在于:APU 2.0、软件开发包SDK以及Tool Kits的升级。

同时,联发科还表示其将AI技术在应用领域的产品进程分为三个阶段,首先应用领域就是在智能手机,其次是在智能家居产品,明年将会有相应产品发布,然后是智能驾驶领域。

发布会后,联发科技计算与人工智能技术群处长吴骅与联发科无线通讯事业部产品总监李彦辑还接受了智东西等媒体的问答,对联发科在AI技术上的研发优势,以及Helio P90产品的一些细节进行了深入交流。

一、NeuroPilot v2.0三大升级看点

联发科手机AI平台迎来三大升级 高端芯片P90下周揭晓

今天的共同会由联发科技计算与人工智能技术群处长吴骅主讲,据介绍吴骅是联发科内部最早关注AI技术的人,早在2013年他就开始关注AI领域,从2014年开始带领联发科在AI技术方面进行研究。

联发科手机AI平台迎来三大升级 高端芯片P90下周揭晓

据吴骅介绍,与第一代相比,NeuroPilot v2.0在三个方面进行了升级,分别在硬件、软件和深度学习网络优化三个方面,核心亮点在于:APU 2.0、软件开发包SDK以及Tool Kits的升级。

NeuroPilot v2.0将是一个全集成的终端AI计算平台,集成了GPU/CPU/APU、4G modem、WiFi、BT、摄像头和多媒体引擎。并且NeuroPilot v2.0将支持主流的DNN网络框架,可开发Face ID、人像美化、场景识别、手势识别、语音识别和Benchmark技术。此外,它还兼容了安卓P版本系统的39个API,以及联发科自家的API。

对于开发者来说,NeuroPilot v2.0将提供更友好的开发环境,而这个友好则是减轻了对神经网络训练的数据标准工作,方法这是通对神经网络进行剪枝和量化。

联发科手机AI平台迎来三大升级 高端芯片P90下周揭晓

联发科认为,在DNN网络架构中,有不少多余的网络造成了神经网络在训练的过程中计算力的浪费。因此,在对网络进行剪枝的过程中,第一步也是最为关键的就是选择哪个网络不重要。

沟通会上,联发科展示了对MobileNet V1、ResNet-34和InceptionV3三个典型的神经网络模型的剪枝后的运算量减轻的数据,其中对于MobileNet V1模型可以将GMACs运算量降低35%~40%。

联发科手机AI平台迎来三大升级 高端芯片P90下周揭晓

而网络量化则将FP32格式数据量化到INT8格式,联发科展示对FP32、FP16、INT8三种数据类型的测试结果,从准确度上来看,将格式转换到INT8后,计算的准确度基本不变,但功耗却大大降低,从联发科给出的数据对比来看,FP32格式下的功耗为90.2mJ,而在INT8格式下,功耗可以降到其1/11,仅仅为8.4mJ。

在产品应用方面,联发科表示将AI技术在应用领域的产品进程分为三个阶段,首先应用领域就是在智能手机,其次是在智能家居产品,明年将会有相应产品发布,然后是智能驾驶领域。不过,联发科无线通讯事业部产品总监李彦辑补充说,这三方面的应用的研发都正在进行,只不过智能手机产品的迭代更快,因此芯片方面也会最新面世。他还透露说,在智能家居产品上的推广,将会在接下来的一两代产品中看到。

二、P90架构大调整,专注提升算力和降低功耗

联发科手机AI平台迎来三大升级 高端芯片P90下周揭晓

联发科技计算与人工智能技术群处长吴骅与联发科无线通讯事业部产品总监李彦辑在接受智东西等媒体问答时表示,P90芯片被认为是联发科的一个高端产品,在硬件方面将搭载联发科最强的技术,而在软件方面,据称也进行了大量的优化,使其可以达到旗舰产品的水平。

当智东西问到P90芯片如何做到在提升算力的同时和降低功耗的,李彦辑表示,P90芯片在整体架构上进行了调整,不过他也说到独立的人工智能处理单元并不能独立处理一项任务,必须与硬件的其他模块进行配合,因此,软硬协调的优化也非常重要。

今年3月,联发科首款搭载NeuroPilot AI技术的手机处理器芯片Helio P60并正式发布。对于P60芯片对联发科的作用和重要意义,李彦辑表示,P60芯片大幅度提升了用户对联发科产品的印象,目前P60芯片的销量也远超了预期,在联发科今年的财报中就可见一斑。

他也透露说,即将发布的P90芯片与P60相比,P90芯片的整体架构进行了大幅度的调整,在性能和功耗上将有很大程度上的跃进,而在应用领域,P90芯片也将会给智能手机带来更多的AI应用,目前正在和手机厂商以及第三方合作伙伴展开了相关合作。

吴骅认为,对于芯片的AI性能不应该只追求跑分数据,更注重芯片本身功耗和性能间的平衡。他介绍说,联发科在P90芯片上有两个核心关注的方向,一是针对性能来说,将提高算力和降低功耗;二是针对应用来说,将于更多的第三方进行合作,开放式地拥抱AI,据称在P90的发布会上,联发科的更多的第三方合作伙伴将会亮相。同时,APU2.0以及Helio P90的性能和更多的应用也将在发布会上详细进行展示。

当被问到,联发科在AI技术领域的技术优势和挑战时,吴骅表示,联发科的优势在于在过去的发展过程中累积了很多的IP,完整度比较强,这些是很多创业公司短时期内无法追赶上的。

对于联发科如何将AI能力带入到不同定位芯片的问题,李彦辑则表示说,高中低端的产品的芯片在AI表现力肯定不同,但会想办法以不同的解决方案将这些应用呈现在不同档次的产品上,比如高端产品实现实时处理,低端产品采用后端处理等。

三、NeuroPilot平台发展过程

NeuroPilot是联发科AI技术平台,于2018年在CES展上正式推出。这一平台将硬件产品AI处理器与软件服务整合在一起,为用户提供完整的人工智能解决方案。

根据联发科的说法,NeuroPilot是一种将CPU、GPU和APU(AI处理单元)等异构运算功能内建到SoC中的技术,其中APU是联发科所研发的人工智慧处理单元。该硬体是可扩充(单核到多核)的人工智能处理单元。

NeuroPilot的异构运算架构可以协调芯片CPU、GPU、APU之间的运作,优化AI应用在手机上的性能与功耗表现,据联发科数据显示,执行同样的AI任务时,相较于GPU, APU可将功耗降低一半。

此外,NeuroPilot还支持TensorFlow、Caffe2等主流神经网络算法架构,并且向开发者提供NeuroPilot软件开发工具套件SDK,兼容Android神经网络API。

联发科手机AI平台迎来三大升级 高端芯片P90下周揭晓

今年3月,首款搭载NeuroPilot AI技术的手机处理器芯片Helio P60并正式发布。Helio P60采用了12nm制造工艺、采用Arm Cortex A73和A53大小核架构,搭载双核AI专用计算模块APU(AI specialized Processing Unit),对游戏体验进行了优化、并搭载三核ISP用于相机优化、可以支持20:9的全面屏。相较于上一代产品,P60的CPU及GPU性能均提升70%、整体功耗降低了12%。

Helio P60中搭载的APU计算模块是源自联发科自研的技术,是P23、P30等芯片中搭载的VPU模块的升级,不过APU在VPU的架构上增加了更适宜神经网络运算的能力。今年中旬推出的主打夜景拍摄的OPPO R15就采用了Helio P60,此外还有vivo Y97、OPPO A3、诺基亚X5等机型。

继P60之后,今年5月底联发科又推出了第二款手机AI处理芯片Helio P22。Helio P22同样采用台积电12纳米FinFET制程,内建8颗Cortex A53核心,最高频率为2.0GHz,为专为中端手机所设计,其AI功能主要用于照相功能。

10月联发科又发布了中端处理器Helio P70芯片,采用了台积电12nm工艺制程,由Cortex A73×4+Cortex A53×4组成,GPU为ARM Mali-G72。与上一代Helio P60相比,效能提升13%。同时联发科P70搭载多核多线程人工智能处理器,AI效率上比上一代提升了10%至30%。不久前,OPPO在印度市场发布的Realme U1手机,就是Helio P70处理器的首发机型。

结语:AI算力将全面下放到智能终端

临近年底,AI芯片掀起了又一个高潮。明天高通新一代7nm芯片将正式亮相,而就在下周联发科也将带来其年度重磅的旗舰芯片P90。从今天沟通会的情况来看,联发科虽然在AI芯片领域起步较晚,但凭借着在芯片IP上积累的优势,正在进行追赶。

而随着联发科新一代AI芯片发布,智能手机将有可能迎来AI计算力在中低端机型的进一步下放,智能手机在AI芯片上竞争也将从有没有上升为在功耗和AI应用上的竞争。与此同时,随着老牌芯片厂商在AI芯片上的觉醒,芯片创业公司的压力将进一步加大。