【手机之家新闻】OPPO在第三届OPPO未来科技大会2021 (OPPO INNO DAY 2021)发布OPPO首个影像专用NPU-马里亚纳® MariSilicon X,不但是OPPO首个自研芯片,同样也是全球首个6nm移动端独立影像专用NPU。
如今,手机SoC中集成了ISP和AI引擎,ISP是Image Signal Processor 的简称,也就是图像信号处理器。其一般用来处理Image Sensor(图像传感器)的输出数据,如做AEC(自动曝光控制)、AGC(自动增益控制)、AWB(自动白平衡)、色彩校正、Lens Shading、Gamma 校正、祛除坏点、Auto Black Level、Auto White Level等等功能的处理。AI引擎则可以整合SoC当中CPU/GPU/DSP/AI内核等所有计算单元来进行AI任务的调配,以实现AI性能及能效的最优化。
只不过,OPPO表示,通用芯片无法满足AI对计算影像提出的算力和能效要求,OPPO要实现自己的影像目标,需要通过自研专用NPU的形式,最大化地解决算力和能效的问题。NPU处理器专门为物联网人工智能而设计,用于加速神经网络的运算,解决传统芯片在神经网络运算时效率低下的问题。嵌入式神经网络处理器(NPU)采用“数据驱动并行计算”的架构,特别擅长处理视频、图像类的海量多媒体数据。
马里亚纳® MariSilicon X用AI时代的DSA新黄金架构理念,通过AI芯片化的专芯专用,跨越传统硬件和AI算力鸿沟。强大的AI能力是传统ISP所完全不具备的,其AI算力超过苹果A15;能效11.6Tops/w,运行OPPO AI降噪模型的速度是达到Find X3 Pro(骁龙888)的20倍,能效达到40倍。
专芯专用的能力和效率也是通用NPU绝对比不了的,最高支持人眼级别的20bit Ultra HDR,能覆盖100万:1的最大亮度范围,是目前行业主流HDR能力的4倍;支持20bit RAW计算,为整个影像链路输出无损计算后的高质量数据,能带来基础画质的提升、预览成像、三方App画质提升。
除此之外,马里亚纳® MariSilicon X充分发挥了RGBW的更强能力,通过双链路的设计和2x RAW计算,实现7.6倍信噪比和1.7倍解析力提升。马里亚纳® MariSilicon X集成双层存储,包括Tb级读写速度的AI专用宽带(SRAM),以及8.5GB/s的影像专用带宽,为AI的高效运算提供充分的内存读写支持。
马里亚纳® MariSilicon X的出现,利用AI技术解决ISP和通用处理器算力不足导致的夜景视频长期以来画质不佳的传统手机影像难题,以及传统影像链路中的信息损耗问题。首次在4K AI HDR视频中实现超清夜景照片的清晰画质,将计算影像推向了4K+20bit RAW+AI+Ultra HDR新极限。