让手机理解世界第二代骁龙8影像技术有新突破

发布时间：2022-11-28 09:06 所属栏目：45 来源：互联网

导读：手机拍照能力经过多年的发展后，已经与智能手机初期的拍照是两回事了。消费者对手机拍照能力的衡量因素也在变化，像素数、传感器、镜头数量、厂商合作等因素都曾经被十分看重，这些其实都是以光学层面为主导的。实际上现在手机成像能力的主要衡量因素，应该

　　手机拍照能力经过多年的发展后，已经与智能手机初期的拍照是两回事了。消费者对手机拍照能力的衡量因素也在变化，像素数、传感器、镜头数量、厂商合作等因素都曾经被十分看重，这些其实都是以光学层面为主导的。

　　实际上现在手机成像能力的主要衡量因素，应该是以芯片算力、算法为主导的计算摄影层面。手机芯片的算力发展速度明显领先手机镜头模组，很多拍照功能在芯片技术支持下很轻松就能实现。曾经手机双摄的人像大光圈虚化功能，目前任意手机几乎都能使用单摄通过算法来实现。场景识别、多帧合成等底层技术，更是近些年手机拍照的基础。

　　第二代骁龙8 让手机理解世界

　　高通在11月发布了第二代骁龙8移动平台，其在影像方面有了更进一步的发展，首次打造了Cognitive-ISP，也就是“认知ISP”，它相比之前的ISP，把AI引入到更多的处理环节，最终可以让手机通过多个层面看见并理解世界，进而获得更优秀的拍照效果。

　　在认知ISP的支持下，第二代骁龙8 实现了拍照中的“语义分割”技术，这种技术会将场景中的各个部分进行精准识别，比如在人像拍照中，就能把人物、面部、蓝天、绿植、建筑等部分进行准确识别，之后将各个部分进行单独处理，再合成为一张照片。以修图来类比的话，拥有语义分割技术就好比使用多个图层进行修图，而没有的话就是在单独的背景中进行修图，孰强孰弱一目了然。

　　能够在ISP中实现语义分割技术，关键因素是骁龙在AI方面的技术进步，高通在Hexagon处理器和Spectra ISP之间，增加了一个名为“Hexagon直连”的物理连接，在两者之间创建直接通道，从而在影像算法的处理上都能在ISP内部完成，让AI在影像中的运算效率大幅提高，使每个被分割的细节都能得到有针对性的专业优化。

　　第二代骁龙8 的这种新设计，不仅能够提升最终拍摄效果，而且能够显著加快拍照处理速度。现在很多手机在拍照夜景照片后，需要较长时间进行算法处理，用户无法获得实时预览效果，这些在第二代骁龙8 手机中，肯定会得到改善。

　　从专用性走向泛用性

　　可能有人会说了，语义分割这个词听着耳熟，刚发布的Reno9系列不就有这个，而且功能上与第二代骁龙8 完全一样啊。

　　事实上Reno9系列确实提供了语义分割功能，但它实现的方式与第二代骁龙8 是截然不同的。其通过内置的专用NPU来实现语义分割，如果离开这颗NPU芯片的话，那么就不具备语义分割能力了。因此是一种专用性的策略，不具备泛用性。

　　第二代骁龙8 的语义分割则不然，其直接在SOC内部实现，只要是搭载第二代骁龙8 移动平台的手机，就能通过语义分割来提升拍照效果。

　　第二代骁龙8 肯定是2023年旗舰手机市场的标配，同时其还会运用在高性能定位的高性价比机型中，这些手机全都能具备语义分割的拍照能力，拍照体验会有质的飞跃。在目前的手机市场则不然，并非所有旗舰手机都会配备专用的NPU芯片，语义分割的功能只属于少数机型。

　　第二代骁龙8 对手机市场的最大贡献，就是在于让更多的用户获得基础体验的升级。手机夜景拍照就是如此一路走来的，早期手机的夜景拍照，曝光不够、高光压不住、噪点多，在高通多帧降噪技术普及过后，手机夜景能力越来越强。语义分割亦是如此，运用这种技术，无论是拍人或是拍景，乃至视频拍摄上，都能显著提升拍照效果；基于SOC的语义分割能力，普及也只是时间问题。

　　新一代手机影像功能展望

　　基于语义分割技术，新一代智能手机能有什么新功能，我们不妨来看看虹软与高通方面合作打造的新用法。

　　虹软“AI语义分割”通过第二代骁龙8的认知ISP，实现了手机实时的物体辨别，既能够对物体进行精准识别，还能对物体的局部元素进行识别，拍摄中使得蓝天更蓝、草地更绿，人物更突出。

　　在人像拍摄上，虹软“AI语义分割”还可以对五官、头发、皮肤等进行识别分割，从而为更细致的人像美颜处理提供基础技术支持，实现细致入微、千人千面的美颜效果。

　　高通技术公司产品管理副总裁Judd Heape透露，实时的“AI语义分割”技术是在用户拍摄照片和视频时就同步实时运行，甚至在拍摄之前就被启用，这使得用户在准备拍摄阶段，就可从取景器看到实时增强的影像画面。换言之，就是使用第二代骁龙8的新款旗舰手机，是具备所见即所得的预览效果的，在取景框中看到的是什么样子，最终的成片也就是什么样子。

　　基于第二代骁龙8的技术和算力支持，虹软还打造了“AI导演模式”，该功能可以使视频拍摄获得实时自然的景深效果，针对单一的主体拍摄时，背景可实现自动对焦、自动虚化。镜头中有多个拍摄对象的时候，也可实现自动对焦，而且可以跟踪拍摄主体，始终让其处于镜头中的C位。

　　从这些新功能上来看，第二代骁龙8让普通大众轻松拍出许多需要专业化技能和设备支持才能拍出效果。以往追踪拍摄主体需要经验丰富的专业摄影师，现在手机随手拍就行；人像的美化需要专业的化妆造型师，现在手机一键搞定。

　　第二代骁龙8在认知ISP的支持下，获得了影像方面的全面语义分割支持，它或许如同多帧技术一样，成为未来手机影像的基础技术。新一代旗舰手机的影像能力也毋庸置疑，1英寸传感器与第二代骁龙8旗舰芯片双管齐下，肯定差不了。

（编辑：ASP站长网）

让手机理解世界 第二代骁龙8影像技术有新突破

让手机理解世界第二代骁龙8影像技术有新突破