18+

博通攜手新創業者CAMB.AI發表AI晶片 導入「裝置端」即時音訊翻譯、場景描述功能

博通 (Broadcom)宣布與AI新創公司CAMB.AI建立合作夥伴關係,共同打造一款全新的AI 晶片 組。此晶片的關鍵特性在於能「完全在裝置端」 (on-device) 執行即時音訊 翻譯、配音 (dubbing) 與音訊描述 (audio description) 任務,無需依賴雲端連線。

整合即時翻譯 與場景描述,鎖定輔助功能

博通與CAMB.AI強調,由於所有處理都在本地端進行,此方案將能帶來超低延遲的體驗,並且大幅強化內容處理隱私性,同時顯著降低對無線頻寬資源的依賴。

此次合作的另一大亮點是「音訊描述」,在官方展示的一段Demo影片 中 (使用皮克斯電影《料理鼠王》片段),其中AI不僅能即時翻譯對白,還能以語音描述畫面中正在發生的場景 (例如:老鼠在廚房奔跑),並且能以多種語言呈現。此功能對於視障 (vision issues) 用戶而言,顯然極具應用價值。

效能仍待實測,CAMB.AI技術已獲全美賽車協會採用

不過,報導中也提醒,此次展示的Demo影片是經過嚴格控制與剪輯的片段,此技術在真實世界場景中的運作效能與資訊準確性仍有待觀察。

儘管如此,CAMB.AI的語音模型技術已經被全美賽車協會 (NASCAR)、Comcast與歐洲歌唱大賽 (Eurovision) 等組織所採用。

預計支援150種語言,上市時程未定

雙方宣稱,此晶片未來將能支援「超過150種語言」的裝置端翻譯。

至於搭載此晶片的電視或其他裝置何時會上市,博通指出目前此技術仍處於測試階段 (testing phase),預期距離實際導入市售產品還需要一段時間。

此次合作也是博通近期在AI領域的最新發展佈局,而博通近期才剛宣布與OpenAI達成合作,將協助後者生產其自研AI晶片。

《原文刊登於合作媒體mashdigi,聯合新聞網獲授權轉載。》

本日熱門 本周最熱 本月最熱