11月10日,vivo召开“双核x影像技术交流会”。
会议围绕影像和性能,介绍了vivo与联发科的深度合作、vivo新一代自研芯片等新技术,展示了vivo在自主研发和开放合作方面的最新成果。
Vivo产品副总裁黄涛、芯片规划中心总监吴洪涛、影像多媒体中心高级总监杜元甲、X系列产品经理王波、联发科技总经理陈冠州出席技术交流会并分别发表演讲或演讲。
(vivo产品副总裁黄涛出席沟通会并致辞)自研芯片V2架构迭代带来极致算力和能效比。
2021年以来,vivo开创并坚持走自研芯片技术之路,不断打磨无人有、我有的。
持续迭代的底层核心能力。
这一努力也通过两代自研芯片V1和V1+得到了市场的认可。
此次,自研芯片V2以全新迭代的AI-ISP架构开启移动影像新篇章。
(自研芯片V2三大单元升级)自研芯片V2带来兼容性和功能性的全面提升,对片上存储单元、AI计算单元、图像处理单元进行大幅升级。
提出FIT双核互联技术,在自研芯片V2与天玑9200旗舰平台之间建立全新的高速通信机制,让两颗架构和指令集完全不同的芯片在1/时间内完成双核互联同步100秒,实现数据与算力的优化协调与高速协同。
(FIT双核互联技术实现数据与算力的优化协调和高速协同)得益于近存DLA(vivo自研AI深度学习加速器)模块和大容量专用片上SRAM(高高速低功耗缓存单元),自研芯片V2对算力容量、算力密度和数据密度进行了重新匹配,大幅提升了片上缓存的容量和计算速度。
与NPU常用的DDR外存设计相比,SRAM数据吞吐功耗理论上可降低高达99.2%,能效比较传统NPU提升200%。
FIT双核互联和近存DLA的结构设计,使得自研芯片V2的AI-ISP架构得以建立,并与平台芯片NPU互补ISP算法和算力,实现极致的图像处理效果和最终能效比。
(自研芯片V2全新架构,兼容性和功能全面提升)自研影像算法迭代,协同V2影像算力,拓展全场景专业影像。
作为vivo四大长赛道之一,移动影像能力一直是vivo旗舰机机型的核心优势。
借助自研芯片V2带来的强大AI算力,这一优势将进一步增强。
本次沟通会上,vivo带来了长焦影像、运动抓拍、弱光抓拍等先进的自研成像算法。
在自研芯片V2固化算法能力的加持下,以及HDR、NR、ProMEMC的加入,vivo将vivo移动影像技术推向了新的高度。
(vivo自研图像算法)以光学超分辨率算法为核心的“超清画质引擎”,可在5倍以上焦段还原约35%的清晰度信息; Ultra Zoom EIS技术结合了IMU、OIS和EIS三大组件,有效抵消高倍变焦拍摄时的相机抖动,保证预览图像的稳定性,让相机即使手持也能平稳移动,为vivo的长焦能力带来质的飞跃。
(vivo的长焦能力全面提升)为了解决快门延迟问题,缩短手机拍摄与专业相机的差距,vivo研发了“零延迟”拍摄和新一代运动检测算法。
通过优化图像处理流程,提高传感器启动速度,快门延迟时间缩短至30ms,达到专业相机水平。
只需按下快门按钮即可快速创作影片,极大提升了vivo移动成像捕捉移动物体的能力,帮助用户捕捉生活中更多转瞬即逝的美好瞬间。
(RawEnhance2.0算法提高了弱光环境下的拍照能力)为了满足专业用户的全场景成像需求,vivo还通过算法叠加和整个摄影的优化,实现了弱光拍摄功能链接,大大提高了传感器在弱光场景下的性能。
感光能力;通过多帧融合技术和自主研发的RawEnhance 2.0算法,实现运动画面的叠加和拖影的消除,让用户在暗光环境下轻松捕捉高质量的动态画面。
5大联合研发功能深度释放天玑9200旗舰平台潜力(联发科总经理陈冠州出席沟通会)vivo一直坚持与供应链合作伙伴打造“强强联合”的产业生态系统,并通过不断联合打造研发联合调整。
深度定制,更具竞争力的零部件及整机产品。
此次在通信大会上亮相的联发科最新一代旗舰SoC平台天玑9200就是一个典型代表。
它基于台积电第二代4nm工艺技术开发,具有更高性能和更低功耗的旗舰级性能。
vivo很早就参与了天玑9200旗舰平台的研发。
通过双方20个月的密切合作,带来了以MCQ多循环队列、王者荣耀自适应画质模式、芯片护眼、APU框架融合和AI机场模式为核心的5项共同开发的关键功能。
(强强联合,vivo与联发科五大联合研发功能)MCQ多周期队列是重新定义的全新处理引擎,可以最大限度地发挥CPU的性能。
它可以支持CPU和UFS之间最多8通道的数据传输,让应用软件的切换和后台下载唤醒更快、更流畅。
王者荣耀自适应画质模式是vivo、联发科、王者荣耀联合开发的基于MAGT游戏自适应循环的黑科技。
开启自适应功能后,在26℃环境下,王者荣耀120+极限配置下运行一小时,游戏帧率接近满帧,均方误差仅为0.92,达到顶级行业内的水平。
芯片护眼技术实时监测屏幕蓝光比例,通过创新算法和硬化IP实时减少蓝光,使高能可见蓝光比例低于5%,色偏程度降低12%。
同时,根据监测结果动态调整画面色彩效果,减少蓝光的同时保证屏幕不偏色。
APU框架集成基于vivo天玑9200旗舰平台第六代APU的硬件特性,将联发科的底层通用能力封装到其自研的VCAP异构计算加速平台中。
实现从平台底层到框架层的深度优化,让算法在多个处理器之间协调调度,带来显着的能效提升,从而推出摄像头超清文档、直播文本等功能。
AI机场模式在飞行过程中平均可节省30%的电量;关闭飞行模式后,最快1.52秒即可快速恢复网络连接,让网络恢复速度快了一步。
系统内核级联调,在多场景下展现旗舰平台的极致性能。
除了联合研发之外,vivo和联发科还共同调校了很多细节,帮助天玑9200旗舰平台实现了极致的性能。
经过vivo和联发科的联合研究,天玑9200的性能再次突破极限,安兔兔跑分突破128万。
(vivo天玑9200工程机跑分)在游戏场景中,vivo带来了游戏超分等黑科技,通过快速启动引擎和网络加速引擎,多方面、全方位优化游戏体验;在成像场景,首次实现了先进的循环视差网络,功耗极低,大幅优化能效表现,能耗降低15%。
尤其是在4K 60帧极限视频录制场景下,天玑9200的功耗相比天玑9000降低了25%。
(vivo产品副总裁黄涛总结发言)自研芯片V2彰显了vivo的决心并努力通过底层核心技术的不断迭代,不断赢得用户和市场;后续移动影像技术的加强和进步,将帮助vivo进一步脱颖而出。
稳定高端旗舰定位;与全球顶级SoC旗舰平台的持续深入合作和丰硕成果,彰显了vivo坚定不移的开放态度和联合研发的深厚底蕴。
正如vivo产品副总裁黄涛在沟通会上所言:技术必须用产品来说话,自研芯片是vivo的底气;技术自研是一条壁垒深厚、长期积累的发展道路。
vivo一直坚持潜心研发。
因为,我们不仅希望比别人做得更好,走比别人更踏实、更长远的路,我们更希望市场和消费者能够通过vivo每一代旗舰产品感受到与世界的美好连接。