手机影像发展到今天,AI技术的迭代升级功不可没。近日,联发科在天玑旗舰技术沟通会上率先提出将先进的旗舰电视图像增强技术应用于移动芯片,并带来了AI图像语义分割技术(AI Image Semantic Segmentation)在多媒体上的新应用,既可以精准高效的处理图像,也可大幅降低算力需求,这无疑是联发科在手机影像和显示功能上的火力全开之作。
众所周知,在全球智能电视芯片市场,联发科市场份额占比常年稳居第一,其智能电视芯片凭借强劲的性能与AI画质增强技术(AI-PQ)等技术优势,受到电视厂商和消费者的高度认可。
正是在智能电视领域深厚的AI技术积累,赋予了联发科在AI图像处理能力上的竞争优势。联发科率先将最新的旗舰电视技术带入到移动平台,助力智能手机除了“用得久”“跑得快”,也能“拍得美”“看得美”。
在智能手机显示方面,用户对于智能手机的画质有较强的需求,而传统的图像处理方式费时费力且无法有效处理好复杂的场景与人物,如何呈现用户满意的图像是目前手机芯片及终端厂商待解决的问题。
联发科提出将旗舰电视芯片中先进的图像增强技术,用于旗舰手机芯片的相机及显示功能,全面提升视觉和抓拍体验。同时借助AI图像语义分割技术强大的物体识别和精准区域分割能力,既可降低手机功耗也可保证视觉效果。
AI图像语义分割(Image Semantic Segmentation)技术,可针对复杂场景的不同物体特征进行差异化图像处理,营造更立体的景深效果。还可通过图像物体之间的组合与比例,判断画面场景, 围绕场景的特征进行针对性处理,以达成图像优化。
例如,画面中出现的蓝天、绿地、草席、人像等元素,通过AI图像语义分割,快速将各物体分类切割,进行有针对性的优化,从而呈现出更接近真实的画面效果,让用户收获更细腻、逼真的图像体验。
进入5G时代,AI多媒体成为主流应用,为用户带来更丰富的拍照、视频录制、直播等多媒体创作方式,视频画质效果的提升已成为刚需。同时,视频规格的提升也意味着系统负担拉高,将面临手机发烫的情况,伴随着温度升高,可叠加的算法受限,导致整段视频中的某一帧效果不及直接拍照。
未来,通过AI图像语义分割技术,可仅针对不同物体只做该部分的画质增强或特效处理,降低所需运算负载,由此可叠加更多的优化算法,快速提升视频录制效果。
AI图像语义分割技术可针对复杂场景中不同的物体特征进行差异化图像处理,也可针对主体背景物体生成特殊效果。此外,这项技术在视频美化处理方面具有显著优势,通过AI场景画质增强技术可实时识别图像中的场景内容,以优化建筑、风景、人像等场景下每帧画面的对比度、锐利度和色彩。另一方面,AI区域画质增强技术还可实时进行物体识别和切割,调节每帧画面中不同物体的图像参数。
除了显示方面,AI图像语义分割技术同样可运用于智能手机的影像应用,让追焦更精准。相比传统的追焦方式,通过AI图像语义分割技术可自动区分主体和背景,针对主体可精准设定快门参数以确保准确对焦,让抓拍更清晰。
AI是智能手机发展不可或缺的核心技术,AI多媒体是主流的发展趋势。如果说高能效AI(APU)是联发科布局手机AI的第一步,那将AI图像语义分割技术引入智能手机则是其创新的第二起手式。
在今年的天玑旗舰技术沟通会上,联发科还分享了诸多其他先进技术,包括移动光追、移动GPU增效方案、5G新双通、WiFi 7、高保真蓝牙音频、高精度导航等。能够看到联发科持续探索移动平台前沿趋势,在旗舰技术方面又一次带来令人惊喜的创新,推动移动终端用户体验持续升级,展现出联发科对于旗舰技术的前瞻布局,期待下一代天玑旗舰芯片的超神表现!