在近日举行的影像技术分享会上,vivo围绕自研影像芯片、光学器件优化、软件算法提升,展示了vivo在硬件级算法时代的布局策略。
不只vivo,越来越多手机厂商开启了算法和硬件自研,或与芯片厂商联合定制CMOS、SoC等关键元件。背后原因是摄影成为手机厂商寻求差异化卖点的主要赛道,也是消费者重度使用的功能。随着消费者对个性化场景、复杂化场景的拍摄需求越来越高,对手机的数据处理能力和能效指标也提出了前所未有的要求。
高能力与低功耗兼得
如果说镜头是人类的眼睛,ISP就是视觉神经。镜头捕获的信息需要经过ISP的处理,才能转化为被人眼识别的图像。
在高通、联发科等第三方公版芯片中,ISP往往集成在SoC中以提升与GPU的互联效率及硬件整合度。但集成ISP往往难以满足消费者的个性化或重度拍摄需求。
为此,vivo推出了自研独立ISP芯片V1。作为独立ISP,V1在主芯片集成ISP成像能力的基础上,叠加专业影像处理能力,从而释放了主芯片的算力和能效。在既定的业务下,V1既可以像CPU一样高速处理复杂运算,也可以像GPU和DSP一样,完成数据的并行处理。
“过去手机拍照处理一张照片需要半秒或一秒,现在的30fps视频,需要一秒处理约30帧画面。对运算密度提升和能耗下降的要求,产生了巨大的技术鸿沟。定制化芯片能释放主芯片的功耗负载,提升用户使用体验。”vivo影像算法总监杜元甲表示。
具体来看,V1为手机摄影带来三个优势。一是将旗舰级桌面电脑吞吐能力搬到手机中。二是支持多个计算成像算法的实时并发处理,实现二次提亮和二次降噪。三是满足用户对性能提升和功耗降低两个看似矛盾的需求。通过将软件算法转移至V1的专用硬件电路中, V1的专用算法硬件电路功耗降低了50%。
突破光学器件
镜头作为手机的眼睛,同样有着复杂的结构。由于手机镜头高度集成化,业内大多数手机型号采用了塑胶镜片。但是,塑胶材料在光学设计优化方面已遇到瓶颈。相比之下,玻璃镜头具有通透性好、折射率高等特点,能拔高手机摄影的上限。
然而,玻璃镜片的制作工艺难度更大,工艺步骤比原先增加了11步,工序复杂,每100片中才能挑选出60片良品。经过与蔡司团队多轮验证,vivo克服工序复杂、工艺步骤多的难点,在手机上搭载了高规格玻璃镜片。
据悉,这种玻璃镜片具有高透光率、超低色散、热稳定强的效果,是目前手机行业中使用过的阿贝数最高的镜片,可明显改善高反差场景的紫边、伪色等问题。
算法升级AI助力
对于追求专业摄影体验的用户来说,“原始素材+严谨后期”才能最大程度地还原拍摄主题及场景。为了还原色彩的自然感,vivo联合蔡司共同研发“蔡司自然色”,以满足专业用户的色彩需求。
同时,vivo基于算法和模型,尝试在手机端还原蔡司经典镜头Biotar和Sonnar的人像风格。vivo采用了深度卷积网络,学习了28万张人像分割、10万张手势分割图片。此外,通过像场分布模型、滤波核生成技术模型,vivo分别对Biotar的口径蚀和光斑进行还原,最终在手机上重现了Biotar和Sonnar的镜头效果。
平台、器件、算法等各方面的共同协作,决定了最终的成像品质,算法与硬件,缺一不可。vivo影像产品经理王兆丰表示,手机摄影已经进入硬件级算法时代,只有结合技术探索与人文思考,在人性化的专业影像道路上不断前行,手机摄影才能为创作带来更大的可能性。
*免责声明: 凡本网注明“来源:XXX(非神州瞭望网)”的作品,均转载其它媒体,转载目的在于传递更多信息,并不代表本网赞同其观点和对其真实性负责。若内容涉及投资建议,仅供参考勿作为投资依据。本网站无法鉴别所上传图片或文字的知识版权,如果侵犯,请及时通知我们,本网站将在第一时间及时删除。
美国明目张胆抢芯 !企业交出机密数据 后果如何 9月23日,美国政府以应对全球芯片危机为名,强势要求包括台积电、三星在内的20多家芯片相关企业提供商业机密数据,而且声称若有企业不配
2021-11-09
中新社莫斯科11月8日电 (张萌 田冰)莫斯科一地方法院8日对谷歌处以罚款200万卢布(1美元约合71卢布),理由是其拒绝删除违禁信息。至此,谷歌今年在俄罗斯总计被罚款4100万卢布。 塔斯社、俄
2021-11-09
当焦虑、内卷不断在商业社会里翻滚,不知从何时开始,工作、开会逐渐成为职场人的全部。然而职场并非只有文案、代码和KPI,越来越多企业开始将管理重点转向为员工带来更多成长的资源与空
2021-11-09
新华社北京电(记者张辛欣)工信部近日发布的数据显示,截至8月底,具有一定行业和区域影响力的工业互联网平台超过100家,连接工业设备总数达到7600万台(套),全国在建5G+工业互联网项
2021-11-09
在当下的现实生活中,公众常常接到电信诈骗、网络赌博等诈骗团伙电话,不少人心中都很疑惑:犯罪分子是如何知道自己的个人信息的? 11月8日,记者从眉山市丹棱县公安局证实,在省公安
2021-11-09
携号转网困难重重 只因尾号三个0? 长沙晚报全媒体记者 范宏欢 手机号码用了5年多,只因手机尾号的3个0,就在未被告知的情况下悄然变成所谓的靓号?想要办理携号转网,却因为《靓号协议
2021-11-09
今年8月,国家新闻出版署下发《关于进一步严格管理切实防止未成年人沉迷网络游戏的通知》,要求严格限制向未成年人提供网络游戏服务的时间,未成年人网络防沉迷系统构建初见成效。然
2021-11-09
通过100多个工序,每28.5秒就有一部荣耀Magic 3高端旗舰手机下线。中国证券报记者近日在深圳市荣耀智能制造产业园了解到,荣耀Magic 3系列、荣耀50系列两款旗舰手机已开始生产,预计未来两年
2021-11-09
本报记者 吴文婧 见习记者 冯思婕 EDG夺冠的消息占领了周末的热搜榜,从打游戏不务正业到国际赛为国争光,电竞赛道的发展如火如荼。 此前,杭州亚运会正式公布电子竞技小项设置,英雄联
2021-11-09
本报记者 赵学毅 见习记者 张晓玉 北京时间11月7日凌晨,中国LPL赛区战队EDG获得2021年英雄联盟全球总决赛冠军,引发广泛关注。热度背后,电竞行业是否将迎来春风拂面? 盘古智库高级研究
2021-11-09