今天下午,vivo召开双核X影像技术沟通会,介绍了vivo与联发科的深度合作,并发布了第二代自研影像芯片V2。
从2021年开始,vivo推出了两代自研芯片,V1和V1+这款自研芯片V2采用了全新迭代的AI—ISP架构,带来了兼容性和功能性的全面提升,对片内存储单元,AI计算单元和图像处理单元进行了大幅升级提出了FIT双核互联技术,在自研芯片V2和天机9200旗舰平台之间建立了全新的高速通信机制,让两个架构和指令集完全不同的芯片在1/100秒内完成双核互联同步,实现数据和计算能力的最优协调和高速协同
据介绍,得益于DLA模块和大容量专用片上SRAM,自研芯片V2在计算能力,计算密度和数据密度方面进行了重新匹配,大大提升了片上缓存的容量和计算速度与NPU采用的DDR外存储器设计相比,SRAM数据吞吐功耗理论上最多可降低99.2%,与传统NPU相比能效比可提高200%
FIT双核互联,近内存DLA的结构设计,使得自研芯片V2的AI—ISP架构得以建立,与平台芯片NPU互补ISP算法和计算能力,实现极致的图像处理效果和极致的能效比。
本站了解到,在本次沟通会上,vivo还带来了长焦影像,运动捕捉,暗光捕捉等先进的自研影像算法,借助自研芯片V2固化算法能力和新的HDR,NR,ProMEMC,将vivo的移动影像技术推向了一个新的高度。
以光学超分割算法为核心的超清画质引擎,可还原5倍焦距以上约35%的锐度信息,Ultra Zoom EIS技术集成了IMU,OIS和EIS模块,可以有效抵消高倍变焦拍摄过程中的抖动,保证预览画面的稳定性,甚至可以稳定持镜。
为了解决快门延迟问题,缩短手机拍摄与专业相机的差距,vivo开发了零延迟捕捉和新一代运动检测算法通过优化图像处理流程,提高传感器启动速度,快门延迟时间缩短至30ms,达到专业级相机水平
为了满足专业用户对全场景影像的需求,vivo还通过算法叠加和摄影全链路优化,实现了暗光捕捉功能,大大提高了暗光场景下传感器的灵敏度,通过多帧融合技术和自主研发的RawEnhance 2.0算法,叠加运动画面,消除拖影,让用户在黑暗环境下也能轻松拍摄出高质量的运动画面。
Vivo是全球首款天机9200处理器,基于TSMC第二代4纳米工艺技术开发vivo表示早期参与了天机9200旗舰平台的研发通过双方20个月的紧密合作,带来了以MCQ多周期队列,王者荣耀自适应画质模式,芯片护眼,APU帧融合,AI机场模式为核心的五大联合研发功能
MCQ多周期队列是一个全新的处理引擎,重新定义以充分发挥CPU的极限性能它可以支持CPU和UFS之间多达8路的数据传输,使应用软件的切换和后台下载唤醒更快更流畅
王者荣耀自适应画质模式是vivo,联发科和王者荣耀联合研发的一项黑科技,基于MAGT游戏自适应循环开发开启自适应功能后,在26℃的王者荣耀120+极速配置下运行1小时游戏帧率接近全帧,均方差仅为0.92,达到行业顶尖水平
芯片护眼技术实时监测画面中蓝光比例,通过创新算法,硬化成ip,实时减少蓝光,使高能可见蓝光比例小于5%,色偏程度降低12%同时根据监测结果动态调整屏幕的色彩效果,在保证屏幕偏色的同时减少蓝光
APU框架集成是基于vivo天机9200旗舰平台的第六代APU的硬件特色,将联发科底层通用能力封装到自主研发的VCAP异构计算加速平台中从平台底层到框架层实现深度优化,算法在多处理器间协同,带来显著的能效提升基于此,推出超清文档,文字直播等相机功能
AI机场模式可以在用户飞行过程中实现平均30%的节能,关闭飞行模式后,最快可在1.52秒内快速恢复网络连接,让重新布线速度快了一步。
除了联合研发,vivo和联发科还联合调整了多项细节,帮助天机9200旗舰平台实现了极致性能安兔兔实验室跑分超过128万
在游戏场景上,vivo带来了游戏的超分级技术,通过快速启动引擎和网络加速引擎,多环节全方位优化游戏体验,在视频场景中,首次以极低的功耗实现了先进的循环视差网络,大幅优化了能效表现,降低了15%的能耗特别是在4K 60帧极限视频场景下,天机9200的功耗比天机9000低25%