昨日,vivo举行了双芯×影像技术沟通会,会上介绍了vivo与联发科的深度合作,且发布了第二代自研影像芯片V2。
2021 年以来,vivo 已经推出了 V1、V1 + 两代自研芯片,此次自研芯片 V2 采用全新迭代的 AI-ISP 架构,带来兼容性和功能性的全面提升,对片上内存单元、AI 计算单元、图像处理单元进行大幅升级。提出 FIT 双芯互联技术,在自研芯片 V2 与天玑 9200 旗舰平台之间建立起全新的高速通信机制,使两颗架构和指令集完全不同的芯片在 1/100 秒内完成双芯互联同步,实现了数据和算力的优化协调与高速协同。
据介绍,得益于近存 DLA(vivo 自研 AI 深度学习加速器)模块和大容量专用片上 SRAM(高速低耗缓存单元),自研芯片 V2 对算力容量、算力密度和数据密度进行了重新匹配,大幅提升片上缓存的容量和运算速度。与通常 NPU 采用的 DDR 外存设计相比,SRAM 数据吞吐功耗理论最大可减少 99.2%,相比传统 NPU 能效比提升 200%。
FIT 双芯互联和近存 DLA 的结构设计使自研芯片 V2 的 AI-ISP 架构得以建立,并与平台芯片 NPU 实现 ISP 算法和算力的互补,实现极致的图像处理效果和极致能效比。
本次沟通会上,vivo 还带来了长焦影像、运动抓拍、暗光抓拍等进阶版自研影像算法,在自研芯片 V2 固化算法能力和新增 HDR、NR 和 ProMEMC 的加持下,将 vivo 移动影像技术推向新的高度。
以光学超分算法为核心的“超清画质引擎”,可以恢复 5 倍以上焦段约 35% 的清晰度信息;Ultra Zoom EIS 技术综合了 IMU、OIS 和 EIS 三大模块,在高倍变焦拍摄过程中有效抵消抖动,确保预览画面稳定性,即使手持也能稳稳运镜。
为解决快门延迟问题,缩短手机拍摄与专业相机之间的差距,vivo 研发了“零延时”抓拍和新一代运动检测算法。通过优化图像处理流程提升传感器启动速度,将快门延迟时间缩短到 30ms,达到专业相机水准。
为满足专业用户的全场景影像需求,vivo 还通过算法叠加和摄影全链路优化实现了暗光抓拍功能,大幅提升传感器在暗光场景下的感光能力;通过多帧融合技术和自研 RawEnhance 2.0 算法实现运动画面叠加、消除拖影,使用户能够在暗光环境下轻松捕捉高品质的动态画面。
vivo 将全球首发天玑 9200 处理器,该处理器基于台积电第二代 4nm 制程技术开发而成,vivo 称在极早期就介入了天玑 9200 旗舰平台的研发,通过双方长达 20 个月的密切合作,带来以 MCQ 多循环队列、王者荣耀自适应画质模式、芯片护眼、APU 框架融合以及 AI 机场模式为核心的 5 项联合研发功能。
MCQ 多循环队列是为发挥 CPU 极致性能而重新定义的一款全新处理引擎,最多可支持 CPU 和 UFS 之间的 8 通道数据传输,让应用软件的切换和后台下载唤醒更快、更流畅。
王者荣耀自适应画质模式,是由 vivo、MediaTek、王者荣耀三方联合研发,基于 MAGT 游戏自适应循环开发的一项黑科技。开启自适应功能后,26℃环境下,在王者荣耀 120 + 极致配置下运行 1 小时,游戏帧率接近满帧,均方差仅有 0.92,达到业界顶级水平。
芯片护眼技术通过实时监测画面蓝光占比,通过创新性的算法并硬化成 IP 的方式实时降低蓝光,让高能可见蓝光占比小于 5%,色偏程度降低 12%。同时根据监测结果动态调整画面色彩效果,在降低蓝光的同时保证屏幕不偏色。
APU 框架融合则是 vivo 基于天玑 9200 旗舰平台第六代 APU 的硬件特性,将 MediaTek 的底层通用能力,封装到自研 VCAP 异构计算加速平台中。从平台底层到框架层实现深度优化,让算法在多个处理器之间协同调度,带来显著的能效提升,并以此推出相机超清文档、实况文本等功能。
AI 机场模式可在用户乘机飞行期间实现平均节能 30%;关闭飞行模式后,最快可在 1.52 秒内迅速恢复网络连接,让复网速度快人一步。
除了联合研发,vivo 与联发科还就多项细节进行了联合调校,帮助天玑 9200 旗舰平台发挥极致性能,安兔兔实验室跑分超过 128 万。
游戏场景下,vivo 带来了游戏超分等技术,并通过疾速启动引擎和网络加速引擎对游戏体验进行多环节、全方位优化;影像场景下,首次以极低的功耗实现了先进的循环视差网络,大幅优化能效表现,能耗降低 15%。尤其在 4K 60 帧极限录像场景中,天玑 9200 的功耗相比天玑 9000 降低了 25%。