10月12日,联发科举办天玑旗舰技术媒体沟通会,会上分享了天玑5G移动平台的最新技术进展和前沿趋势,包括移动光追、移动GPU增效方案、AI图像语义分割、5G新双通、Wi-Fi7、高保真蓝牙音频、高精度导航等最新成果。
押注移动光追,新品即将落地
面对光线追踪技术,芯片厂商多数持积极态度,目前,英伟达、AMD、英特尔三家桌面GPU厂商已经支持硬件层面的光线追踪技术,并应用于电脑、游戏主机中。另一方面,行业正在加速移动光追技术迭代,2021年11月,Imagination发布了可以在移动端实现硬件光线追踪的GPU,作为行业中首个针对移动端优化的光线追踪架构,采用Photon架构的IMG CXT通过专用的光线加速集群(RAC)承担此前的光线追踪任务,使其在移动端有能力实现光线追踪效果。
今年年初,Khronos发布Vulkan1.3图形API规范,支持Vulkan RaytracingAPI,标志着移动GPU的光追技术将加速普及,并覆盖更广泛的内容类型。同年6月,Arm发布了新一代的旗舰GPU系列Immortalis,其中,Immortalis-G715为Arm旗下首款提供硬件光线追踪能力的GPU,相比上一代Mali-G710,Immortalis-G715性能提升15%,能耗节省15%,机器学习性能提升2倍。同时,光线追踪单元只占用了约 4%的着色器核心面积,仅耗费非常小的功耗,就能在相关领域带来3倍性能提升。通过硬件加速,可实现实时的移动光追效果,包括光追软阴影、反射效果和全局光照技术,提升全场景画质。
移动光追技术迭代的过程中,联发科已经完成了提前布局。手机之家了解到,早在一年前,联发科推出基于 Vulkan扩展的移动端光线追踪 SDK解决方案,并与 Arm以及腾讯游戏共同实现了移动端实时光线追踪技术的首次演示。通过提前布局VulkanRay Query技术方案,携手行业合作伙伴开展密切合作,率先构建移动光追技术生态。
最新的天玑9000+芯片基于 AI-VRS可变渲染技术、Android平台的移动端游戏超分技术AI-SR和面向游戏开发者的移动端光线追踪技术开发套件,能够以更低功耗实现画质飞跃,带来沉浸式长效游戏体验。此外,面向开发者和硬件厂商,联发科还与评测工具厂商联合推进移动光追生态发展。
一直以来,联发科与Arm做比较深度的合作,采访中也进一步透露了下一步的规划。联发科方面表示,三年来一直在讲的光追技术很开心即将看到开花结果。联发科与Arm在进行深度联合调校和一些联合规划后,相信会让联发科使用GPU的IP更有竞争力,整个平台会更有竞争力。至于新品什么时间能落地,联发科表示即将推出相对应的产品。各位可以再期待一段时间。
会上,联发科还基于移动端游戏等应用的发展特征,提出移动GPU增效方案,针对GPU性能提升,搭配GPU周边技术(VRS、游戏超分、游戏插帧),实现保持系统资源平衡的基础上,满足高复杂度内容的计算需求。从性能和能效提升、生态发展、平台软件优化、自研算法等不同维度布局技术。
5G新双通、Wi-Fi 7、高保真蓝牙音频,无线链接世界即将到来
作为双卡技术的引领者,联发科早在2008年就推出了首款支持2G+2G双卡技术的MT6225芯片,至此联发科将双卡双待推向规模商用并相继推出了3G+2G双待、4G+2G双待、4G+3G双待、4G+4G双待、5G+5G双待。在持续引领双卡功能迭代的同时,联发科积累了丰厚的双卡技术经验,正是这些宝贵的经验,使其实现了使用单套基带、射频以及“动态双车道”软件架构实现5G新双通。
手机之家了解到,5G新双通拥有弹性架构、覆盖更广的优势,支持频段组合可达100种以上,并可覆盖更多网络制式,包括SA(SA+SA和SA+LTE)、NSA(NSA+LTE)、LTE(LTE+LTE)等。其中全时双通可实现动态双车道数据传输,支持30种以上的频段组合,分时双通则可实现“下行同时+上行分时”数据传输,可支持70种以上的频段组合。
同时,联发科在会上透露有关卫星通信技术上的进展。据悉,联发科在几个月前实现了物联网的卫星通信,跟仪表完全对连,协议对连的一个技术成果。所以在近期内,这项技术也可以获得一些落地的进展。
2022年1月20日,联发科宣布率先成功完成Wi-Fi 7技术的现场演示,同年5月23日,联发科发布Wi-Fi 7无线连接平台解决方案—Filogic 880和Filogic 380,提供适用于运营商、零售、商用和消费电子市场的高带宽应用。这两款芯片是联发科在全球率先推出的Wi-Fi 7完整解决方案。
与Wi-Fi 6相比,Wi-Fi 7拥有更高吞吐率、更低网络时延以及更高网络使用效率等新特性。支持先进的 4K QAM (Quadrature Amplitude Modulation)调变技术,新增 MLO (Multi-Link Operation)技术可实现链路聚合,Wi-Fi7可以达到上一代2.7倍。且在6GHz频段支持更高的320MHz带宽。借助MRU (Multiple Resource Unit)可提升网络使用效率,将噪音干扰对频段的影响由75%降低至25%,大幅降低噪音干扰对频段的影响,在多用户负载的网络下可显著提升吞吐率。
联发科表示,作为一家业务覆盖全球的芯片供应商,会以行业最高标准来储备技术,所以产品会具备2.4GHz、5GHz、6GHz频段的支持能力。全球各个国家和地区会有不同的频段特点,联发科会根据不同情况做应对处理。未来联发科会发布支持Wi-Fi 7的产品,包括手机端和路由端,大家可以期待一下。
联发科还在会上分享了高保真蓝牙音频方面的发展趋势。首先,联发科旗舰移动平台能够支持包括LHDC、索尼LDAC等等蓝牙高清的编解码器。其次,LE Audio也是MediaTek主力发展的一个方向,主要是去解决蓝牙低延迟的问题,在游戏场景下面,低延迟也是能够带给用户很好的体验。再次,空间音频方面将会跟更多第三方在硬件、软件上进行合作,期待能够带给客户在空间音频上更好的体验。
联发科强调在蓝牙音频秉持着开放的角度,作为一个主芯片去推广整个生态发展。期待能够跟更多的蓝牙芯片一起合作,包括恒玄、达发等这些蓝牙芯片一起共同经营蓝牙的生态圈。联发科的蓝牙音频开放生态在203年将支持8Mbps超高蓝牙吞吐量,支持24bit/192KHz高清蓝牙音频编码器,可以适配各大主流蓝牙芯片平台。
AI图像语义分割技术,用算法解构世界
早在2018年,联发科就开始强调计算摄影的重要性,最初通过Computer Vision一些算法,把多帧降噪做好。随后联发科引入了AI处理的概念,今年四年时间的发展,如今借助先进的AI图像语义分割技术(AI Image Semantic Segmentation),可针对复杂场景中不同的物体特征进行差异化图像处理,也可针对主体背景物体生成特殊效果。
此外,这项技术在视频美化处理方面具有显著优势,通过AI场景画质增强技术可实时识别图像中的场景内容,以优化建筑、风景、人像等场景下每帧画面的对比度、锐利度和色彩。另一方面,AI区域画质增强技术还可实时进行物体识别和切割,调节每帧画面中不同物体的图像参数。
上述提到的操作,都是在你按下快门键后实时发生的,是无感知的。在拍摄过程中就把图像语义分割做下来,自动辨识要拍的物件的特性,把它做到最好的处理,拍下来马上就可以分享。并且AI图像语义分割技术的加入可大幅降低算力需求,兼顾效果和能效,为智能手机的影像和显示应用带来更高效、更出色的体验。
至于大家更关心的厂商自研影像芯片以及联名问题,联发科也进行了解答。联发科表示,任何客户能把手机做得更好的方式和合作,无论SOC还是分散式的外挂的,不管是ISP或Display,整体要把这个系统的功耗做好,才可以把很多的功能发挥出来。所以联发科会参与到联合调校中,尽量把系统整体的功耗降下来,把最好的功能叠上去。
同时,联发科会将架构的弹性都留下来,后面的风格调试,不管是徕卡风格,或者任何不同的喜好,平台会预留出弹性出来。后面的偏好性会跟客户做比较紧密的配合,做一些更精细的调试。另一方面,AI图像语义分割技术同样可运用于智能手机的影像应用,让追焦更精准。相比传统的追焦方式,通过AI图像语义分割技术可自动区分主体和背景,针对主体可精准设定快门参数以确保准确对焦,让抓拍更清晰。
尾声:
联发科还在会上分享了MPE融合技术,使用微机电传感器(加速器、陀螺仪、磁力计)融合全球卫星导航系统,广泛运用于驾驶、步行与跑步等智能手机用户日常导航应用场景。MPE融合技术可优化隧道、高架桥下与市区楼宇等区域的导航体验,实现更高精度、持续性更强的定位,并支持车道级导航,让手机用户随时随地享受高精度定位带来的便利。
虽然联发科在这场媒体沟通会上并未发布任何一款产品,但依托这些指向未来的技术,我们可以管中窥豹,了解到未来产品的发展趋势和方向。从时间点来看,此次沟通会是为旗舰新品的预热前奏,让我们拭目以待吧。