近日,聯發科技重磅發布最新一代旗艦移動芯片天璣9300,業內首創的全大核芯片設計,以及與生成式AI技術的結合成為發布會的最大亮點。慧鯉作為聯發科技生成式AI的重要生態合作伙伴,現場展示了AI防眩光、圖生GIF等生成式AI在移動端的最新應用。憑借軟硬件技術體系的完美結合,慧鯉正在與聯發科技等芯片巨頭加速開辟移動端生成式AI新圖景。
圖生GIF新體驗,玩轉表情包更簡單
隨著人工智能大模型及生成式AI技術與應用的逐步完善,對芯片也提出了更高要求。最新發布會上,聯發科技詳細展示了合作伙伴慧鯉生成式AI在其最新手機芯片上的成果,并首次實現了端側LoRA融合,讓大模型技能可在本地擴展。
最讓人眼前一亮的是慧鯉的圖生GIF動圖(Image to GIF)功能。基于慧鯉成熟的LoRA訓練體系,精準學習不同用戶的faceID特征,即使疊加各種抽象的藝術風格LoRA,仍能保證人物辨識度和特征多樣性。用戶只需要輸入text prompt,即可任意選擇各類畫面風格,設計不同微表情圖像,自由玩轉個人專屬表情包。
慧鯉利用獨特的生成技術,結合天璣9300支持的生成式AI端側技能擴充技術“NeuroPilot Fusion”,在基礎模型上持續融合不同專業技能,擴展各項生成式AI應用和功能,并在移動終端裝置上實現LoRA成果。突破性兼顧了多張生成圖之間的效果穩定性,和對不同表情prompt的高保真還原度:保持背景、主體不變的情況下生成不同的高質量表情圖片。同時,配合生成式AI算子加速,處理速度更快。
生成式AI防眩光技術,還原真實美感
發布會現場還演示了慧鯉生成式AI防眩光技術。借助疊加去眩光和內容生成功能,手機拍攝可以更好地還原真實世界的光感,拍攝效果更真實唯美。
傳統拍攝極易出現鏡頭眩光偽影,尤其是遇到鏡頭臟污、硬件特性等客觀因素,往往會嚴重影響畫質呈現效果,并且對拍攝者來說這種情況很難完全避免。
慧鯉利用vision Transformer搭建起高效的AIGC算法模型,在高效檢測并去除各種光點耀斑的同時,可以正確生成并復原被耀斑遮擋的內容,以達到去眩光的拍攝效果。值得一提的是,慧鯉還針對圖像內容實現了全局編碼,可以針對鏡頭臟污眩光、花瓣形等鏡頭眩光等多種眩光形態進行去除與修復,最終實現高質高效地相機側應用。無論是室內、室外,抑或路燈下、燭光邊,眩光還原可以排除各種光源干擾。
慧鯉生成式AI與天璣9300的技術融合,正在為移動端AI解鎖更多精彩玩法。隨著AI大模型在終端用戶市場的加速普及落地,慧鯉將與聯發科技進一步加強軟硬件產品合作,用更先進的技術和應用,為用戶帶來更美好的生成式AI移動新體驗。
