「拯救」手機視頻拍攝!聯發科AI圖像語義分割技術,帶來更好畫質

手機影像發展到今天,AI技術的迭代升級功不可沒。近日,聯發科天璣旗艦技術溝通會上率先提出將先進的旗艦電視圖像增強技術應用於移動晶元,並帶來了AI圖像語義分割技術(AI Image Semantic Segmentation)在多媒體上的新應用,既可以精準高效的處理圖像,也可大幅降低算力需求,這無疑是聯發科在手機影像和顯示功能上的火力全開之作。

眾所周知,在全球智能電視晶元市場,聯發科市場份額佔比常年穩居第一,其智能電視晶元憑藉強勁的性能與AI畫質增強技術(AI-PQ)等技術優勢,受到電視廠商和消費者的高度認可。

正是在智能電視領域深厚的AI技術積累,賦予了聯發科在AI圖像處理能力上的競爭優勢。聯發科率先將最新的旗艦電視技術帶入到移動平台,助力智能手機除了「用得久」「跑得快」,也能「拍得美」「看得美」。

在智能手機顯示方面,用戶對於智能手機的畫質有較強的需求,而傳統的圖像處理方式費時費力且無法有效處理好複雜的場景與人物,如何呈現用戶滿意的圖像是目前手機晶元及終端廠商待解決的問題。

聯發科提出將旗艦電視晶元中先進的圖像增強技術,用於旗艦手機晶元的相機及顯示功能,全面提升視覺和抓拍體驗。同時藉助AI圖像語義分割技術強大的物體識別和精準區域分割能力,既可降低手機功耗也可保證視覺效果。

AI圖像語義分割(Image Semantic Segmentation)技術,可針對複雜場景的不同物體特徵進行差異化圖像處理,營造更立體的景深效果。還可通過圖像物體之間的組合與比例,判斷畫面場景, 圍繞場景的特徵進行針對性處理,以達成圖像優化。

例如,畫面中出現的藍天、綠地、草席、人像等元素,通過AI圖像語義分割,快速將各物體分類切割,進行有針對性的優化,從而呈現出更接近真實的畫面效果,讓用戶收穫更細膩、逼真的圖像體驗。

進入5G時代,AI多媒體成為主流應用,為用戶帶來更豐富的拍照、視頻錄製、直播等多媒體創作方式,視頻畫質效果的提升已成為剛需。同時,視頻規格的提升也意味著系統負擔拉高,將面臨手機發燙的情況,伴隨著溫度升高,可疊加的演算法受限,導致整段視頻中的某一幀效果不及直接拍照。

未來,通過AI圖像語義分割技術,可僅針對不同物體只做該部分的畫質增強或特效處理,降低所需運算負載,由此可疊加更多的優化演算法,快速提升視頻錄製效果。

AI圖像語義分割技術可針對複雜場景中不同的物體特徵進行差異化圖像處理,也可針對主體背景物體生成特殊效果。此外,這項技術在視頻美化處理方面具有顯著優勢,通過AI場景畫質增強技術可實時識別圖像中的場景內容,以優化建築、風景、人像等場景下每幀畫面的對比度、銳利度和色彩。另一方面,AI區域畫質增強技術還可實時進行物體識別和切割,調節每幀畫面中不同物體的圖像參數。

除了顯示方面,AI圖像語義分割技術同樣可運用於智能手機的影像應用,讓追焦更精準。相比傳統的追焦方式,通過AI圖像語義分割技術可自動區分主體和背景,針對主體可精準設定快門參數以確保準確對焦,讓抓拍更清晰。

AI是智能手機發展不可或缺的核心技術,AI多媒體是主流的發展趨勢。如果說高能效AI(APU)是聯發科布局手機AI的第一步,那將AI圖像語義分割技術引入智能手機則是其創新的第二起手式。

在今年的天璣旗艦技術溝通會上,聯發科還分享了諸多其他先進技術,包括移動光追、移動GPU增效方案、5G新雙通、WiFi 7、高保真藍牙音頻、高精度導航等。能夠看到聯發科持續探索移動平台前沿趨勢,在旗艦技術方面又一次帶來令人驚喜的創新,推動移動終端用戶體驗持續升級,展現出聯發科對於旗艦技術的前瞻布局,期待下一代天璣旗艦晶元的超神表現!