此外,AI 赋能的全新 NVIDIA DLSS 3.5,其光线重建技术可用于 NVIDIA RTX Remix 中的Mods。

ChatRTX 更新了!添加了新的 AI 模型和功能!  第1张

编者注:本文属于《解码 AI》系列栏目,该系列的目的是让技术更加简单易懂,从而解密 AI,同时向 RTX PC 用户展示全新硬件、软件、工具和加速特性。

基于 LLM 的聊天机器人为计算领域带来了变革,而 NVIDIA ChatRTX 让用户可与自己的本地数据进行交互。由 NVIDIA RTX 提供支持的 Windows PC 和工作站可为该过程加速。ChatRTX 首次亮相于 3 月的 GTC 大会,而最近的更新则为其添加了新的模型和功能 - ChatRTX 现在更强大了!

NVIDIA RTX Remix 测试版更新将支持光线重建技术的 NVIDIA DLSS 3.5 引入了 MOD 平台,旨在实现更加令人印象深刻的实时光线追踪效果。

ChatRTX - 无所不谈

ChatRTX 更新了!添加了新的 AI 模型和功能!  第2张
https://images.nvidia.cn/cn/youtube-replicates/zMROAxJQ7rk.mp4

ChatRTX 使用 RAG 技术,经由 NVIDIA TensorRT-LLM 和 NVIDIA RTX 加速,为 RTX Windows PC 和工作站带来聊天机器人功能。ChatRTX 运行在本地,用户可在 LLM 的支持下查询自己的笔记和文档,ChatRTX 将针对查询快速生成相关回应。

ChatRTX 的最新版本增加了对更多 LLM 的支持,包括 Gemma - 由 Google 训练的最新开源LLM。Google 在开发 Gemma 时采用了与Gemini 相同的研究和技术,并设计为“responsible AI” (Responsible AI指的是以安全、可靠和合乎道德标准的方式开发、评估和部署AI系统的方法)ChatRTX 现在还支持 ChatGLM3,这是一个基于通用语言模型框架的开源双语 (英语和中文) LLM。

得益于 ChatRTX 对 OpenAI CLIP (Contrastive Language-Image Pre-training) 的支持,用户还可与图像数据进行交互。CLIP 是一种神经网络,通过训练和优化,利用自然语言监督学习视觉概念 - 也就是说,该模型能够识别图像集中它"看到"的内容。通过 ChatRTX 中的 CLIP 功能,用户可以使用单词、术语、短语与本地设备上的照片和图像进行交互,而无需做复杂的元数据标记。

在新版 ChatRTX 中,用户还可与自己的数据通过语音进行交互。得益于 ChatRTX 对 Whisper(利用 AI 来处理口述语言的自动语音识别系统)的支持,用户可以向 ChatRTX 发送语音查询,后者将提供文本回应。

RTX Remix - 与 AI 的碰撞

ChatRTX 更新了!添加了新的 AI 模型和功能!  第3张
https://images.nvidia.cn/cn/youtube-replicates/kXNzDQTSFF8.mp4

通过 RTX Remix,Modder 可以使用 NVIDIA Omniverse 平台上的各种经 AI 加速的工具,制作经典 PC 游戏的 RTX 重制版。

得益于本周推出的 RTX Remix 更新,Modder 现在只需动动鼠标即可使用支持光线重建技术的 DLSS 3.5 来处理项目。其先进的 ,AI 赋能的神经网络渲染器可提升光线追踪效果的保真度、响应速度和质量,为 NVIDIA GeForce RTX 游戏玩家带来更出色的体验。

AI 也可为 Remix 工作流的其他部分提供支持。Modder 能够使用生成式 AI 纹理工具来分析经典游戏中的低分辨率纹理,进而生成物理上精准的材质 (包含法线贴图和粗糙度贴图),并提升其分辨率 (最高可提升至原来的 4 倍)。此类工具还可以快速处理原本会很繁琐的任务,节省 Modder 的时间。

请访问 GeForce.cn,了解有关全新 RTX Remix 测试版更新的更多信息。

生成式 AI 正改变各类游戏、视频会议和互动体验。请订阅《解码 AI》时事通讯,我们每周都会将新鲜资讯直接投递到您的收件箱。