VR娛樂科技公司COVER宣布旗下 VTuber 事務所 hololive production 與索尼集團半導體解決方案(SSSG)合作,導入後者開發的擴增實境軟體開發工具包(SDK)《ToF AR》,未來 hololive 成員直播時,只需一台智慧手機就能輕鬆追蹤捕捉 3D 細微動作。
COVER 上市後極力投注在專屬直播系統,本次針對實況的手部追蹤功能升級,透過索尼集團研發的《ToF AR》,今後 holo 成員實況中只須用自己的手機,輕鬆實現 3D 臉部與手部追蹤,未來也將持續改良以呈現更棒的實況效果。
根據索尼半導體官方網站描述,《ToF AR》這款 AR 套件適用手機與平板,透過鏡頭與雷射感測器(光達等)深度數據結合,提供沉浸式動捕實況體驗。
《ToF AR》除了能準確地捕捉虛擬空間當中物體的細節和位置,真實感拉好拉滿,還能識別手指和關節,呈現 VTuber 精確的手部追蹤與頭像控制,即使手指隱藏設備當中,也能在空中畫圖、做出各種手勢。
hololive 成員過去家用 3D 實況手部細節不夠到位,畢竟需要專用設備才能實現,但《ToF AR》「一機搞定」的功能,與兩大廠標準 AR 引擎:蘋果 iOS 的 ARKit、Google 安卓的 ARCore 相容,且允許開發者透過 Unity 開發 AR 應用程式,不只 VTuber,強化未來遊戲製作、工業應用等領域的 AR 發展。