设为首页 - 加入收藏 ASP站长网(Aspzz.Cn)- 科技、建站、经验、云计算、5G、大数据,站长网!
热搜: 创业者 数据 手机
当前位置: 首页 > 综合聚焦 > 移动互联 > 数码 > 正文

让手机理解世界 第二代骁龙8影像技术有新突破

发布时间:2022-11-28 09:06 所属栏目:45 来源:互联网
导读:手机拍照能力经过多年的发展后,已经与智能手机初期的拍照是两回事了。消费者对手机拍照能力的衡量因素也在变化,像素数、传感器、镜头数量、厂商合作等因素都曾经被十分看重,这些其实都是以光学层面为主导的。 实际上现在手机成像能力的主要衡量因素,应该
  手机拍照能力经过多年的发展后,已经与智能手机初期的拍照是两回事了。消费者对手机拍照能力的衡量因素也在变化,像素数、传感器、镜头数量、厂商合作等因素都曾经被十分看重,这些其实都是以光学层面为主导的。
 
  实际上现在手机成像能力的主要衡量因素,应该是以芯片算力、算法为主导的计算摄影层面。手机芯片的算力发展速度明显领先手机镜头模组,很多拍照功能在芯片技术支持下很轻松就能实现。曾经手机双摄的人像大光圈虚化功能,目前任意手机几乎都能使用单摄通过算法来实现。场景识别、多帧合成等底层技术,更是近些年手机拍照的基础。
 
  第二代骁龙8 让手机理解世界
 
  高通在11月发布了第二代骁龙8移动平台,其在影像方面有了更进一步的发展,首次打造了Cognitive-ISP,也就是“认知ISP”,它相比之前的ISP,把AI引入到更多的处理环节,最终可以让手机通过多个层面看见并理解世界,进而获得更优秀的拍照效果。
 
  在认知ISP的支持下,第二代骁龙8 实现了拍照中的“语义分割”技术,这种技术会将场景中的各个部分进行精准识别,比如在人像拍照中,就能把人物、面部、蓝天、绿植、建筑等部分进行准确识别,之后将各个部分进行单独处理,再合成为一张照片。以修图来类比的话,拥有语义分割技术就好比使用多个图层进行修图,而没有的话就是在单独的背景中进行修图,孰强孰弱一目了然。
 
  能够在ISP中实现语义分割技术,关键因素是骁龙在AI方面的技术进步,高通在Hexagon处理器和Spectra ISP之间,增加了一个名为“Hexagon直连”的物理连接,在两者之间创建直接通道,从而在影像算法的处理上都能在ISP内部完成,让AI在影像中的运算效率大幅提高,使每个被分割的细节都能得到有针对性的专业优化。
 
  第二代骁龙8 的这种新设计,不仅能够提升最终拍摄效果,而且能够显著加快拍照处理速度。现在很多手机在拍照夜景照片后,需要较长时间进行算法处理,用户无法获得实时预览效果,这些在第二代骁龙8 手机中,肯定会得到改善。
 
  从专用性走向泛用性
 
  可能有人会说了,语义分割这个词听着耳熟,刚发布的Reno9系列不就有这个,而且功能上与第二代骁龙8 完全一样啊。
 
  事实上Reno9系列确实提供了语义分割功能,但它实现的方式与第二代骁龙8 是截然不同的。其通过内置的专用NPU来实现语义分割,如果离开这颗NPU芯片的话,那么就不具备语义分割能力了。因此是一种专用性的策略,不具备泛用性。
 
  第二代骁龙8 的语义分割则不然,其直接在SOC内部实现,只要是搭载第二代骁龙8 移动平台的手机,就能通过语义分割来提升拍照效果。
 
  第二代骁龙8 肯定是2023年旗舰手机市场的标配,同时其还会运用在高性能定位的高性价比机型中,这些手机全都能具备语义分割的拍照能力,拍照体验会有质的飞跃。在目前的手机市场则不然,并非所有旗舰手机都会配备专用的NPU芯片,语义分割的功能只属于少数机型。
 
  第二代骁龙8 对手机市场的最大贡献,就是在于让更多的用户获得基础体验的升级。手机夜景拍照就是如此一路走来的,早期手机的夜景拍照,曝光不够、高光压不住、噪点多,在高通多帧降噪技术普及过后,手机夜景能力越来越强。语义分割亦是如此,运用这种技术,无论是拍人或是拍景,乃至视频拍摄上,都能显著提升拍照效果;基于SOC的语义分割能力,普及也只是时间问题。
 
  新一代手机影像功能展望
 
  基于语义分割技术,新一代智能手机能有什么新功能,我们不妨来看看虹软与高通方面合作打造的新用法。
 
  虹软“AI语义分割”通过第二代骁龙8的认知ISP,实现了手机实时的物体辨别,既能够对物体进行精准识别,还能对物体的局部元素进行识别,拍摄中使得蓝天更蓝、草地更绿,人物更突出。
 
  在人像拍摄上,虹软“AI语义分割”还可以对五官、头发、皮肤等进行识别分割,从而为更细致的人像美颜处理提供基础技术支持,实现细致入微、千人千面的美颜效果。
 
  高通技术公司产品管理副总裁Judd Heape透露,实时的“AI语义分割”技术是在用户拍摄照片和视频时就同步实时运行,甚至在拍摄之前就被启用,这使得用户在准备拍摄阶段,就可从取景器看到实时增强的影像画面。换言之,就是使用第二代骁龙8的新款旗舰手机,是具备所见即所得的预览效果的,在取景框中看到的是什么样子,最终的成片也就是什么样子。
 
  基于第二代骁龙8的技术和算力支持,虹软还打造了“AI导演模式”,该功能可以使视频拍摄获得实时自然的景深效果,针对单一的主体拍摄时,背景可实现自动对焦、自动虚化。镜头中有多个拍摄对象的时候,也可实现自动对焦,而且可以跟踪拍摄主体,始终让其处于镜头中的C位。
 
  从这些新功能上来看,第二代骁龙8让普通大众轻松拍出许多需要专业化技能和设备支持才能拍出效果。以往追踪拍摄主体需要经验丰富的专业摄影师,现在手机随手拍就行;人像的美化需要专业的化妆造型师,现在手机一键搞定。
 
  第二代骁龙8在认知ISP的支持下,获得了影像方面的全面语义分割支持,它或许如同多帧技术一样,成为未来手机影像的基础技术。新一代旗舰手机的影像能力也毋庸置疑,1英寸传感器与第二代骁龙8旗舰芯片双管齐下,肯定差不了。

(编辑:ASP站长网)

    网友评论
    推荐文章
      热点阅读