博通攜手新創業者CAMB.AI發表AI晶片 導入「裝置端」即時音訊翻譯、場景描述功能

博通 (Broadcom)宣布與AI新創公司CAMB.AI建立合作夥伴關係，共同打造一款全新的AI 晶片 組。此晶片的關鍵特性在於能「完全在裝置端」 (on-device) 執行即時音訊 翻譯、配音 (dubbing) 與音訊描述 (audio description) 任務，無需依賴雲端連線。

整合即時翻譯 與場景描述，鎖定輔助功能

博通與CAMB.AI強調，由於所有處理都在本地端進行，此方案將能帶來超低延遲的體驗，並且大幅強化內容處理隱私性，同時顯著降低對無線頻寬資源的依賴。

此次合作的另一大亮點是「音訊描述」，在官方展示的一段Demo影片 中 (使用皮克斯電影《料理鼠王》片段)，其中AI不僅能即時翻譯對白，還能以語音描述畫面中正在發生的場景 (例如：老鼠在廚房奔跑)，並且能以多種語言呈現。此功能對於視障 (vision issues) 用戶而言，顯然極具應用價值。

效能仍待實測，CAMB.AI技術已獲全美賽車協會採用

不過，報導中也提醒，此次展示的Demo影片是經過嚴格控制與剪輯的片段，此技術在真實世界場景中的運作效能與資訊準確性仍有待觀察。

儘管如此，CAMB.AI的語音模型技術已經被全美賽車協會 (NASCAR)、Comcast與歐洲歌唱大賽 (Eurovision) 等組織所採用。

預計支援150種語言，上市時程未定

雙方宣稱，此晶片未來將能支援「超過150種語言」的裝置端翻譯。

至於搭載此晶片的電視或其他裝置何時會上市，博通指出目前此技術仍處於測試階段 (testing phase)，預期距離實際導入市售產品還需要一段時間。

此次合作也是博通近期在AI領域的最新發展佈局，而博通近期才剛宣布與OpenAI達成合作，將協助後者生產其自研AI晶片。

《原文刊登於合作媒體mashdigi，聯合新聞網獲授權轉載。》