集微网5月16日报道(文/张轶群)近年来,影像处理能力一直是定义手机SoC平台的重要指标,提供给用户最好的拍照体验成为芯片厂商和手机厂商追逐的目标。特别是随着AI的加持,独立AI专核APU的出现,极大地提升了手机SoC对于影像处理的支持能力。
去年12月,联发科推出最新款的旗舰芯片Helio P90,不仅带来了演进的APU2.0版本,其自研的成像算法Imagiq也升至第四代,AI加持下,基于AI的算法让其拍照能力得到极大提升。
此外,值得一提的是P90的ISP设计。联发科采用了三核ISP的方案,可以支持三个ISP同时开启,支持包括多焦段光学变焦的无缝切换等功能,和AI专核APU2.0配合能够实现丰富的“真AI相机”应用,包括多种拍照和视频功能。
近日,在联发科举办的主题为“真AI 相机,还原真实世界” 的媒体技术沟通会上,联发科对Helio P90 在拍照方面的能力进行了介绍。正是基于APU+ISP的完美组合,联发科提出”真AI相机”的概念,让手机拍照能够还原真实世界,带来媲美人眼的真实感。而首款搭载这款联发科目前最强芯片Helio P90的手机产品也即将面世。
P90的AI能力已经在多个第三方平台的测试中脱颖而出,包括苏黎世AIbenchmark全球跑分第一, 力压骁龙855和麒麟980。
联发科技无线通信事业部营销处处长李俊男
在联发科技无线通信事业部营销处处长李俊男看来,独立APU带来最显著的变化就是拍照能力的提升,尤其是画面降噪能力的提升,让用户在随手拍照、夜拍等场景下可以精准呈现拍摄物体。此外,李俊男表示,独立AI专核APU2.0以硬件计算的方式,不但带来Helio P90全球第一的AI性能,还能降低功耗。
“独立APU加持下的SoC能够支持手机拍照能力媲美单反或微单,有些部分非常贴近,有些部分可以超越,这是我们用AI达到的效果,也我们努力的目标。”李俊男告诉集微网记者。
据李俊男介绍,此前的ISP基本都是采用CV算法,在降噪等方面存在极限,这使得手机的拍照能力无法对单反等专业成像设备实现超越,但AI让这一切成为可能。
联发科技多媒体研发部开发处副处长陈颖睿
联发科技多媒体研发部开发处副处长陈颖睿表示:“Imagiq从第一代Helio X20到Helio P90第四代持续在影像质量算法上做改善,从最早纯手工打造,到过程当中引入CV技术/人脸侦测/双目深度计算,一路到Helio P90引入基于APU上面所做的进一步突破,让我们的拍照品质能够持续不断的提升,能够做到和真实世界越来越贴近的效果。”
陈颖睿介绍,通过结合独立AI专核APU2.0,联发科自研的Imagiq影像技术使得联发科Helio P90在多方面进行了影像质量的提升。
首先,手机相机和传统单反最大的差异在于尺寸,最主要的差异在于感光组件的大小,单反相机感光组件可以非常大,但在手机中却因为尺寸被严重压缩(可能要缩小20-50倍),因此感光面积造成了在光电转换过程中能力的显著差异。这种差异要克服一个先天的障碍叫杂讯处理(即降噪)。
联发科Helio P90真AI相机具有AI多帧降噪技术,结合多帧资讯把杂讯找出来做抑制,让最终成像效果是好的。
其次,在对比的部分做改善。透过Imagiq技术,提升整张照片的对比度。第三,对于动态范围能力的改善。Camera ISP的硬件在处理过程当中,能够有效兼顾高亮和低亮的讯息,而这在传统相机中很难两者兼顾。
“透过APU和ISP的完美结合,我们让超越单反成为可能,这是Helio P90 真AI相机的亮点。”陈颖睿说。
在陈颖睿看来,AI带来的澎湃算力将会在三个等级对成像进行提升。一是侦测,如人脸侦测,和人眼感兴趣的区域侦测,这些都可以通过AI和APU的方式在手机相机上实现。能够在恶劣环境做到实时、低功耗的快速侦测,同时对于脸部位置、方向和性别进行判断。
二是低分辨率的双目深度图。这样的影像处理可以透过APU的处理和ISP的整合,做一个好的深度运算。降低CPU/GPU负载,实现更快的运算和更好的图像质量。
三是全分辨率的处理。像素从传感器进来以后,每一个像素都透过APU和ISP处理,做到最终拍照结果的优化。这个复杂度跟算力需求最大,所以功耗的优化和APU在功耗上的优势就显得非常重要。
基于以上特性,Helio P90在成像方面力求做到超越单反,还原真实世界。
在强背光环境下,AI脸部侦测可以有效实现对于人脸的辨识。
有限比特率及带宽下,有效运用资源达到最好的用户体验,比如视频通话,以及动态影像捕捉。
在夜拍方面,降噪效果明显,画面清晰度更高,能够做到更多的细节呈现。
即便是对比佳能单反,搭载P90的手机产品也能够更清晰地呈现细节,以上图片虽然在色调上前者可能有更好的表现,但在清晰度和细节真实性方面Helio P90表现更为优秀,而陈颖睿表示,色调可以通过在手机拍照模式中进行选择,终端客户也会有自己定制的独特风格。
对于目前有手机厂商推出的大倍数的变焦性能, 陈颖睿表示AI技术也可以实现有效地支持。陈颖睿介绍,目前光学变焦主要能够实现5倍变焦,通过模组硬件实现,从模组支持技术上的挑战不高,同时通过信号处理的方式,通过添加AI算法,实现10倍的数码变焦,达成50倍混合变焦的形式,但目前光学变焦的模组的成本较高,主要用于旗舰机型。
而有关于首款搭载联发科Helio P90的终端何时问世,李俊男表示这个时间很快。相信不久我们就可以体验到搭载Helio P90的终端手机拍照功能了。(校对/范蓉)