NVIDIA 于6 月2 日宣布推出全新NVIDIA RTX™ 技术，用于支援在新款GeForce RTX™ 人工智慧（AI）笔记型电脑上运行的AI 助理及数位人。 NVIDIA 推出由RTX 支援的AI 助理技术展示内容Project G-Assist，可为PC 游戏及应用程式提供环境感知协助功能。在开发商Studio Wildcard 推出的《方舟：生存升级（ARK: Survival Ascended）》游戏中，Project G-Assist 的技术展示内容将首度亮相。接下来，将带你一同来看这项新技术的主要功能。
NVIDIA 为了NVIDIA ACE数位人平台推出首项用于PC 的NVIDIA NIM™ 推论微服务，这项技术将由一套包括全新工具和软体开发套件（SDK）的NVIDIA RTX AI 工具套件支援，可帮助开发者在Windows PC 上最佳化及部署大型生成式AI 模型。这些技术与NVIDIA 的全端RTX AI 创新技术共同加速运行超过500 款PC 应用程式和游戏，以及逾200 款OEM 笔记型电脑设计。另外，华硕（ASUS）与微星（MSI）最新发布的RTX AI PC 笔记型电脑最高将搭载GeForce RTX 4070 GPU ，和具有Windows 11 AI PC 功能的节能系统单晶片。这些Windows 11 AI PC 将在Copilot+ PC 体验推出时获得免费更新。 NVIDIA 消费者AI 部门副总裁Jason Paul 表示：「NVIDIA 在2018 年发布了RTX Tensor 核心GPU 和DLSS 技术，开启了AI PC 时代。如今藉由Project G-Assist 与NVIDIA ACE，NVIDIA 将为超过一亿名RTX AI PC 用户开启新一代AI 体验。」
GeForce AI 助理Project G-Assist
AI 助理将改变人们在玩游戏及使用应用程式时的体验，从提供游戏策略和分析多人游戏重播，至即时协助处理复杂的创意工作流程。 Project G-Assist 让人们能够一窥未来的发展走向。PC 游戏提供浩瀚的宇宙和复杂的机制供玩家探索和掌握，即使是最投入的玩家，也需要花费大量的时间和精力来完成挑战。 Project G-Assist 旨在利用生成式AI，让玩家们娴熟掌握各种游戏知识。Project G-Assist 会接收玩家透过语音或文字输入的内容，以及游戏画面里的语境脉络资讯，并透过AI 视觉模型运行这些资料。这将模型可增强语境脉络感知，同时强化与某个游戏知识资料库连结的大型语言模型（LLM）针对特定应用程式的理解能力，接着生成出以文字或语音形式为玩家们专门打造的相关回应内容。NVIDIA 与Studio Wildcard 合作在《方舟：生存升级(ARK: Survival Ascended) 》这款游戏里展示这项技术。 Project G-Assist 可以帮助回答有关生物、物品、传说、目标、大魔王等方面的问题。由于Project G-Assist 能感知语境脉络，可以根据玩家的游戏过程提供个人专属的回答。此外，Project G-Assist 还能配置玩家的游戏系统，以达到最佳效能和效率。它可以深入了解各项效能指标，根据使用者的硬体调整出最佳的图形设定，安全地进行超频，甚至在保持效能目标的同时智慧降低耗电量。
NVIDIA 用于支援数位人的ACE 技术，现在将透过预先建构好的推论微服务容器NVIDIA NIM 用于RTX AI PC 和工作站，让开发者能够将部署时间从原本的数周缩短到几分钟。 NVIDIA NIM 可在装置本机端运行高品质的推论，用于理解自然语言、语音合成、脸部动画等。在今年的COMPUTEX 大会上，NVIDIA 与Inworld AI 合作开发的 Covert Protocol 技术展示内容，将会是把NVIDIA ACE NIM 用于PC 游戏的首秀，展示在装置本机端运行的NVIDIA Audio2Face™及NVIDIA Riva自动语音辨识技术。
微软与NVIDIA 合作帮助开发者将新的生成式AI 功能用在他们的Windows 原生和网路应用程式里。双方的合作将为应用程式开发者提供方便使用的应用程式介面（API），让他们能够取得由GPU 加速的小型语言模型（SLM），并启用由Windows Copilot Runtime 支援，可在终端装置（on-device）上运行的检索增强生成（RAG）功能。 SLM 为Windows 开发者提供了巨大的可能性，包括内容摘要、内容生成和任务自动化。 RAG 功能可让AI 模型取得基础模型中未充分展现的特定领域资讯，进而增强SLM。开发者可以透过RAG API 利用专门用于应用程式的资料来源，根据应用程式需求调整SLM 的行为和功能。 NVIDIA RTX GPU 及其他硬体厂商的AI 加速器将加速执行这些AI 功能，横跨广大的Windows 生态系统，为终端使用者提供快速又灵敏的AI 使用体验。这款API 的开发者预览版将于今年稍晚推出。
借助RTX AI 工具套件，模型速度提高四倍，体积缩小三倍
AI 生态系统已经建立出成千上万个高品质的开源模型供应用程式开发者使用，但大多数模型都是为通用目的而预先训练，且是为在资料中心运行而建构的。为了帮助开发者建立可在PC 上运行，且专门用于特定应用程式的AI模型，NVIDIA 推出RTX AI 工具套件，一种端到端的工作流程，用于在RTX AI PC 上进行自订、最佳化及部署模型。RTX AI 工具套件将于六月提供给更多开发者使用。开发者可以使用开源的QLoRa 工具自订预先训练好的模型，并使用NVIDIA TensorRT™模型最佳化工具来量化模型，此举可将RAM 消耗量减少多达三倍。 NVIDIA TensorRT Cloud 接着会将模型调整至最佳状态，以便彻底发挥RTX GPU 系列的最佳效能。与预先训练好的模型相比，效能可提高达四倍。全新的NVIDIA AI 推论管理员软体开发套件（SDK）现已推出抢先体验版本，简化在PC 上部署ACE 的复杂性。它为PC 预先配置必要的AI 模型、引擎和依赖关系，并可在PC 与云端环境之间完美协调AI 推论作业。Adobe、Blackmagic Design 与Topaz 等软体合作伙伴已将RTX AI 工具套件的元件加入其热门的创意应用程式，以加速RTX PC 上的AI 运行效能。
Adobe 创意云端产品行销部门副总裁Deepa Subramaniam 表示：「Adobe 与NVIDIA 持续合作，为视讯、影像、设计、3D 等所有创意工作流程提供突破性的客户体验。RTX PC 上的TensorRT 10.0 为创作者、设计师和开发者提供了前所未有的效能表现及AI 支援的功能，让他们能在使用Photoshop 等引领业界的创意工具来创作内容时，得以开启崭新的创意可能性。」
TensorRT-LLM 等RTX AI 工具套的元件已与热门的生成式AI 开发框架及应用程式进行整合，包括Automatic1111、ComfyUI、Jan.AI、Langchain、LlamaIndex、Oobabooga 和Sanctum.AI。
将AI 用于内容创作
NVIDIA 还将RTX AI 加速技术加入创作者、模组制作者和影音爱好者所使用的应用程式。NVIDIA 在去年为Automatic1111（最受欢迎的Stable Diffusion 使用者介面之一）引入了使用TensorRT 的RTX 加速技术。从本周开始，RTX 还将加速运行大受用户欢迎的ComfyUI，与目前已推出的版本相比，效能可提高达60%，与MacBook Pro M3 Max 相比，效能提高了七倍。
供模组制作者使用的NVIDIA RTX Remix 平台可利用全光线追踪技术、NVIDIA DLSS 3.5 和精准符合物理原则的材质，重制经典的DirectX 8 和DirectX 9 游戏。 RTX Remix 包括一个Runtime 渲染器和RTX Remix 工具套件应用程式，使用这个应用程式可以方便修改游戏资产和材质。NVIDIA 在去年对RTX Remix Runtime 进行开源，允许模组制作者扩大游戏相容性与提高渲染能力。
从RTX Remix 工具套件于今年初推出以来，已有两万名模组制作者使用它来制作经典游戏的模组，在RTX Remix Showcase Discord 上有超过130 款透过这款工具套件开发的RTX 重制版游戏。NVIDIA 将在这个月对RTX Remix 工具套件进行开源，让模组制作者能够简化资产替换和重新制作场景光线效果的方式，增加RTX Remix 资产撷取器支援的档案格式，并透过新模型增强RTX Remix 的AI 纹理工具。此外，NVIDIA 将让使用者可以透过REST API 取得RTX Remix 工具套件的功能，让模组制作者能够即时连结RTX Remix与Blender 等数位内容创作工具、Hammer 等模组制作工具，以及ComfyUI 等生成式AI 应用程式。另外，NVIDIA 将提供RTX Remix Runtime 的SDK，让模组制作者可以将RTX Remix 的渲染器部署到DirectX 8 和9 经典游戏之外的其他应用程式和游戏里。
在开放更多RTX Remix 平台原始程式码的情况下，全球各地的模组制作者便能制作出更多令人惊叹的RTX 重制版游戏。Google Chrome、Microsoft Edge 和Mozilla Firefox 浏览器皆支援NVIDIA RTX Video这项热门的AI超解析度（super-resolution）功能，现在已作为SDK 提供给所有开发者使用，帮助他们以原生方式整合AI 技术，进行影像升频、锐化、压缩失真减少和高动态范围（HDR）转换。RTX Video 即将加入影片剪辑软体Blackmagic Design 的DaVinci Resolve 和Wondershare Filmora，它将使影片剪辑人员能够将低画质的影片档案升频至4K 解析度，并且将标准动态范围的原始档案转换成HDR 档案。此外，免费媒体播放程式VLC media 将很快在其现有的超解析度功能中加入支援RTX Video HDR。
评论 ( 0 )