NVIDIA更新ChatRTX功能 支援Gemma等AI模型、新增影像識別能力

NVIDIA在今年2月時展示可在裝置端獨立運作的「Chat With RTX」聊天機器人，目前加入更多新功能，並且支援最新人工智慧模型，而此次更新也在DLSS 3.5加入包含光線重建技術，並且將強化NVIDIA RTX Remix中包含光線追蹤效果模組的表現。

「Chat With RTX」目前以ChatRTX為稱，可利用檢索增強生成、NVIDIA TensorRT-LLM，以及NVIDIA RTX加速等技術，讓聊天機器人能在Windows PC和工作站以大型自然語言模型運作，並且透過自然語言方式與人互動。

新版ChatRTX則加入支援Google近期開放的大型自然語言模型Gemma，另外也支援基於通用語言模型框架的開放式中英雙語ChatGLM3大型自然語言模型。

由於支援OpenAI的對比語言和影像預訓練（Contrastive Language-Image Pre-training，CLIP）技術，使用者還能透過ChatRTX與影像資料進行互動，並且透過訓練和細化後的CLIP神經網絡，進而在自然語言監督中學習視覺概念，意味此模型將可辨識在影像集裡「看到」的東西，讓使用者可透過單字、術語和短語，與裝置本機端的相片和影像進行互動，無需使用複雜的詮釋資料標記。

新版ChatRTX更可讓使用者以用自己的聲音與資料進行聊天，主要在於導入支援使用人工智慧處理口語資料的自動語音識別系統Whisper，讓使用者可以在應用程式上用語音進行查詢，並糗且由ChatRTX以文字回應。

而在新版RTX Remix中，使用者將能藉此將經典PC遊戲「重建」為支援NVIDIA RTX技術的遊戲作品，並且對應DLSS 3.5技術功能，藉此詮釋更真實的即時光影追跡效果，另外也能透過自動生成式人工智慧分析經典遊戲中的低解析度貼圖紋理，進而生成更符合真實物理場景材質、並且將解析度提升4倍，藉此減少模組改裝者原本必須花費長時間調整的情形。

《原文刊登於合作媒體mashdigi，聯合新聞網獲授權轉載。》