meta公司近日宣布了一項全球性的技術創新,針對Facebook和Instagram平臺用戶推出AI語音翻譯功能。這一功能允許內容創作者將視頻內容翻譯成多種語言,極大地擴展了他們的觀眾群體,促進了跨語言文化的交流。
目前,該功能已在meta AI服務覆蓋的所有市場上線,標志著meta在多語言內容創作領域取得了重大突破。創作者無需承擔額外的翻譯成本或技術障礙,即可利用這一AI技術實現內容的跨語言傳播。
早在去年的Connect開發者大會上,meta首次展示了這一功能的原型。當時,公司計劃在Facebook和Instagram的短視頻內容中測試創作者聲音的自動翻譯技術。經過近一年的技術改進和測試,該功能現已成熟,準備在全球范圍內推出。
在技術實現方面,meta的AI翻譯系統展現出高度的聲音還原能力。它能夠分析并保持創作者原聲的音調和語音特征,使翻譯后的配音聽起來自然流暢,避免了傳統機器翻譯中的機械感。這種聲音克隆技術的應用,確保了翻譯內容保留了原創作者的獨特風格和表達。
創作者還可以選擇啟用唇形同步功能。這一技術能夠自動調整翻譯語音與創作者口型動作的匹配度,使翻譯后的視頻看起來更加自然,大大提升了觀眾的觀看體驗。
在語言支持方面,首發版本支持英語與西班牙語的雙向翻譯,meta承諾將逐步增加更多語言選項,以滿足全球用戶的多樣化需求。
在使用權限方面,meta對Facebook和Instagram平臺采取了不同的策略。Facebook創作者需要擁有至少1000名關注者才能使用該功能,而Instagram則對所有公開賬戶開放,但僅限于meta AI服務覆蓋的地區。這種差異化策略旨在確保功能的有效利用,同時為不同平臺的創作者提供靈活的支持。
操作流程設計得相當簡便。創作者在發布短視頻前,只需點擊“使用meta AI翻譯聲音”選項,然后選擇是否啟用翻譯和唇形同步功能。完成設置后,點擊“分享”按鈕即可自動生成翻譯版本,整個過程無需復雜的技術操作。
為了確保創作者對內容的完全控制權,系統提供了全面的預覽和管理功能。創作者可以在內容發布前預覽翻譯效果和唇形同步結果,并隨時選擇關閉任一功能。值得注意的是,關閉翻譯功能不會影響原始視頻的正常發布和傳播。
meta還為創作者提供了數據分析功能,使他們能夠準確了解翻譯內容在不同語言市場的表現。這對于制定內容策略和擴展國際受眾具有重要參考價值。
為了確保翻譯質量,meta為創作者提供了一系列使用建議。建議創作者在錄制時保持正面朝向、發音清晰、避免遮擋嘴部,并盡量減少背景噪音或音樂干擾。系統目前支持最多兩名說話者,并要求避免同時說話以確保翻譯的準確性。
除了AI自動翻譯功能外,Facebook創作者還可以選擇手動上傳配音。通過meta商業套件的“字幕和翻譯”功能,創作者可以為單個短視頻上傳最多20個自定義配音軌道,進一步擴大受眾覆蓋范圍。這種人工配音支持在發布前后均可添加,為創作者提供了更大的靈活性。
Instagram負責人亞當·莫塞里表示:“我們相信許多優秀的創作者擁有不同語言背景的潛在受眾。通過幫助他們跨越文化和語言障礙,接觸到更多說其他語言的觀眾,我們將助力他們擴大關注者群體,從Instagram平臺獲得更大的價值。”
此次功能的推出正值meta對其AI部門進行重組的關鍵時刻。據報道,meta正在將AI團隊劃分為四個核心領域:研究、超級智能、產品開發和基礎設施建設。語音翻譯功能的成功發布,展示了meta在AI產品化方面的顯著進展和技術實力。