7 月 11 日,Bilibili World 前夕,NVIDIA 在上海举行 GeForce RTX 40 系列媒体品鉴会,向媒体展示了 NVIDIA 在 AI 领域的前沿技术以及最新 DLSS 3 游戏试玩体验。
NVIDIA 的 RTX AI PC 在游戏和内容创作领域有着巨大的的成果,目前全球范围内 RTX AI PC 装机量已超过 1 亿台,并有超过 500 款游戏和应用获得 RTX AI 加速。
RTX GPU 可提供高达 200-1300 AI TOPS。各大 OEM 提供超过 200 款 RTX AI 笔记本电脑销售。接下来我们就来看一下此次媒体品鉴会有哪些亮点吧。
游戏更流畅,多款大作宣布支持 DLSS 3
在品鉴会现场,NVIDIA 展出了几款全新大作的体验 Demo,让玩家第一时间感受到 DLSS 技术的魅力。
NVIDIA DLSS 技术目前已经在超过 400 款游戏上得到支持,其中 90 款游戏现已支持 DLSS 3 技术。现已支持 DLSS 3.5 的游戏包括《赛博朋克 2077》、《心灵杀手 2》、《传送门》RTX 版、《第一后裔》。
DLSS 技术通过 GeForce RTX GPU 专属的 Tensor Core,利用 AI 技术来提高帧率并提升图像质量。而 DLSS 3.5 则树立了全新游戏标准,通过 AI 增强全景光线追踪表现,为 GeForce 玩家带来极致体验。
DLSS 技术提升游戏流畅体验的同时,配合 NVIDIA Reflex 和光线追踪技术,能带来更好的游戏延迟表现和更高的画面质量,带给玩家沉浸式的游戏体验。
在游戏体验区,NVIDIA 提供了《三角洲行动》、《漫威争锋》、《鸣潮》、《解限机》四款游戏的体验 Demo,进一步为现场玩家展示 NVIDIA DLSS、Reflex 和光线追踪技术的魅力。
《三角洲行动》是一款第一人称特战干员战术射击游戏。故事背景设定在 2035 年,游戏支持跨端免费游玩。支持 NVIDIA DLSS、Reflex 及光线追踪反射。开启 DLSS 技术和光线追踪后,在保证真实的光线追踪的高画质下,游戏帧率也有很高的流畅体验。
《漫威争锋》是网易游戏的一款 PvP 射击游戏,玩家可以使用漫威电影中的超级应用组件一支全明星小队进行激烈的游戏对抗,这款游戏集合了漫威多元宇宙中的诸多动漫形象,包括复仇者联盟、银河护卫队、X 战警等。
《漫威争锋》将在发布首日就支持 NVIDIA DLSS 3 和 Reflex 技术,玩家使用 GeForce RTX 40 系列 GPU 在每场多人比赛中获得帧率更高、响应速度更快的游戏体验。
《鸣潮》是一款全平台开放世界动作游戏,也是库洛游戏和 NVIDIA 达成合作的首款游戏。
RTX 40 系列 GPU 和 DLSS 3 帮助游戏开发者库洛游戏将《鸣潮》可玩性和画面更上一层,目前,NVIDIA DLSS 3 已成为游戏开发行业普遍采纳的技术标准,同时也为更多游戏达到顶尖画面水平提供帮助。此次展示的《鸣潮》游戏 Demo 也展示出 DLSS 3 技术为游戏所带来的流畅画质体验。
《解限机》是一款近未来科幻机甲主题的多人对战游戏,此次品鉴会上也是首次展示这款游戏的 Demo。
关于这款游戏机甲风格的设定,对于很多看过高达动漫的玩家来讲,是自己操纵机甲一次全新体验。据介绍,这款游戏提供有战场(6v6)以及竞技场(3v3)两种竞技模式。
这款近未来科幻机甲主题多人对战游戏在发布时将支持 NVIDIA DLSS 3,Reflex 以及光线追踪技术。在品鉴会上展出的 Demo 虽然是游戏的早期试玩,但整个操作过程流畅丝滑,喜欢机甲风格的玩家可以期待下这款游戏。
NVIDIA ACE 再进化,NPC 仿佛有了灵魂
NVIDIA ACE 是一项微服务,可以帮助游戏开发商开发出更加智能的 NPC,NPC 可以根据玩家实时对话作出不同的反应,这项技术在 Computex 2023 首次亮相时就引发轰动。
Computex 2024 上 NVIDIA 宣布 NVIDIA ACE 技术通过 NVIDIA NIM 在 RTX AI PC 中运行,NIM 使开发者大大简化 ACE 的部署时间。目前利用 NVIDIA ACE 技术扩展数字人生态规模企业包括 Aww、戴尔、Gumption、Hippocratic AI、英业达、掌趣科技、完美世界游戏、Reality Arts、甲尚科技、ServiceNow、Soulbotix、数字栩生和 UneeQ 等。
在品鉴会现场,NVIDIA 工作人员向我们展示了由 NVIDIA 与 Inworld AI 共同打造的 Covert Protocal 技术演示 Demo。这项技术演示 Demo 可以帮助玩家了解,人物是如何通过 NVIDIA ACE 实现与玩家实时对话,并完成相关任务的。
这一技术演示突破了 NPC 的交互界限,通过集成 Riva 自动语音识别的 Inworld 的 AI 引擎可实现准确的语音转文本,并集成了 NVIDIA Audio2Face 以提供逼真的面部动画。
在演示中,玩家扮演 2062 年的私家侦探马库斯・皮尔斯揭露生物技术公司大亨的邪恶阴谋。本演示中有三个可互动的 NPC,James Park、Sophia Anderson 和 Diego Menendez,他们具有鲜明的个性和动机,并根据为他们手工定制的背景故事提供动态响应。玩家需要使用社交技巧来获取你的目标 Martin Davis 的房间号,以揭开真相。
这一技术演示相比于传统的预置对话不同的是,玩家与 NPC 的交流完全通过自然语言触发,同时 NPC 可以通过上下文来对玩家作出相应的回应。叙事完全由玩家选择驱动,玩家决策会影响 NPC 的行为。
这项黑科技的演示,也让我们看到借助 NVIDIA ACE 未来的游戏刚更具沉浸感,拥有“灵魂”的 NPC 将为玩家带来全新的游戏体验,相信这项技术也会有越来越多的企业选择。
NVIDIA App 更友好,ChatRTX 更聪明
为了更方便用户对 GeForce 显卡进行配置和调整,NVIDIA 推出了 NVIDIA App 这款辅助工具,并将 GeForce Experience 与 NVIDIA 控制面板的整合和现代化改造,带来更加快速便捷的体验,可快速启动,无需登录。NVIDIA App 有全新 Freestyle AI 滤镜 RTX HDR 与 RTX 动态亮丽,并支持 120FPS AV1 录制,同时也可针对每款游戏应用单独设置图形参数,支持 GPU 一键调优。
在展区中,NVIDIA 重点展示了 NVIDIA App 内置的两个基于 AI 的游戏滤镜:RTX 动态亮丽和 RTX HDR。
RTX 动态亮丽是一款 AI 赋能的滤镜,可提升视觉清晰度,让玩家在每款游戏中都能更好地区分游戏内元素。它不仅能在屏幕上呈现更多颜色,而且可以在不同的颜色之间实现完美平衡,避免颜色显示异常。
RTX HDR 也是一款 AI 赋能的全新 Freestyle 滤镜,可以将高动态范围的艳丽视觉效果无缝引入到原本不支持 HDR 的游戏中。玩家只需拥有兼容 HDR 的显示器,即可在原本不支持 HDR 的游戏中体验 HDR 效果。
ChatRTX 借助检索增强生成(RAG)和 NVIDIA TensorRT-LLM 软件,将生成式 AI 功能引入 RTX AI PC。这一演示 Demo 可部署在本地 PC,利用 GeForce RTX GPU 的检索增强生成技术,创造个性化 AI 助手,让本地 AI 大语言模型真正落地并服务于用户。
ChatRTX 使用本地个人资料作为数据集,连接到 ChatGLM 这一类开源大语言模型,以便快速查询、生成个性化的内容。在最新版本中,NVIDIA 新增了 ChatGLM3-6B 这款中文大语言模型。用户还可以通过 Whisper 模型实现语音识别,更方便地与 AI 模型对话。此外,CLIP 模型可以让用户使用自然语言来快速、直观地检索本地的图片。ChatRTX 的所有模型都支持完全本地运行,用户可以放心地查询自己的资料,让 ChatRTX 快速提供安全的回复。
RTX AI PC for 创作,奇思妙想瞬间完成
AIGC 作为这两年来的热门话题,也让不少创意生产者在内容生产上的到巨大的解放。利用 RTX AI PC,创作者可以快速产出将创意落地,并大大提升生产效率。
在品鉴会现场,著名B站 Up 主特效小哥 008 带来一部由生成式 AI 辅助制作的特效短片《特效小哥大战系列之大战河野华》,在传统耗时费力的 3D 特效工作流基础之上,他们使用 ComfyUI 基于 Stable Diffusion 为 3D 模型制作了具有多种材质通道的高质量 AI 贴图,同时辅以 TripoSR 实现生成式的 3D 模型构建,整个 3D 特效的前期工作流基于生成式 AI 工具替代了以往大量的手工绘画和雕刻工作,极大提升了特效短片的制作效率,而其背后由 NVIDIA RTX GPU 支撑的 ComfyUI 工具为工作流带来了极强的性能和兼容扩展性,配合上 TensorRT 的 Stable Diffusion 运行加速,实现 ComfyUI 上最快的 AI 绘画体验。
而最终的高质量特效短片在前期生成式 AI 资产准备的基础上,使用经 RTX GPU 加速的 Blender Cycles 渲染器进行最终合成与渲染,Cycles 渲染器使用 NVIDIA OptiX 加速,在 AI 计算下少量采样的前提下,就可以为建模和动画提供实时的交互式,照片级写实的降噪画面效果,是目前 Blender 中最佳的渲染后端。
从生成式的 Stable Diffusion 到 TripoSR,再到最终渲染的 Blender Cycles OptiX,NVIDIA RTX GPU 为当下最主流的创意工作流提供最高效稳定的计算支持,目前,RTX AI 加速的超过 120 款创意软件,几乎涵盖现阶段所有主流创意生产软件,越来越多的创意生产者,也像特效小哥一样,从生成式 AI 中获得生产力的极大释放。
品鉴会现场,NVIDIA 在 GeForce RTX 40 系列笔记本电脑上展示了 ComfyUI 本地图片生成的表现。ComfyUI 是全球第二大,同时也是增长最快的 Stable Diffusion 应用软件,其独特的基于流程节点的工作流设计和运行方式带来了极强的性能和兼容扩展性,使其广受生成式 AI 开发者的欢迎。
NVIDIA RTX GPU 为 ComfyUI 的性能和兼容扩展性提供强大的开发运行和计算加速支持,作为 ComfyUI 运行的主要环境,CUDA 生态为 ComfyUI 和 NVIDIA RTX GPU 用户提供对生成式 AI 模型和工作流最广泛的支持,并且辅以 TensorRT 的 Stable Diffusion 运行加速,实现 ComfyUI 上最快的 AI 绘画体验。
本次展示的 SuperHero 工作流,通过 Stable Diffusion 强大的生图能力配合 InstantID, IPAdapter 和 ControlNet 等一系列细节控制技术,实现了将用户形象通过简单的摄像头捕捉转换为高清超级英雄形象的完整工作流,并能够根据参考图像和提示词对最终生成形象的姿态,构图,服装,背景等细节因素进行精确控制,在保证精准复刻用户脸部特征的同时为用户形象的趣味创意提供了无限可能。
在这个工作流中,Controlnet 被用来引导最终超人的姿势,选定参考图像,Controlnet 会以这些图像生成对应的景深信息图像,基于这些进一步后续生图流程;InstantID 用于创建面部分析模型,模型分析捕获的输入图像后,结合之前的景深信息,生成最终的趣味定制图像。用户还可以在描述词中,根据需要,进行相应的修改调整,以创作更适合自己需求的图像。如”Female“以更贴近女性形象,“Lightning”等获得更多趣味效果。该工作流目前仅支持 NVIDIA GPU 或 CPU 运行,在 NVIDIA RTX GPU 上运行相较于 CPU 的性能优势可能高达百倍。
除了内容生产,RTX AI PC 还支持 RTX Video。它包含了多种 AI 视频增强功能,分别是 RTX 视频超分辨率(VSR)和 RTX Video HDR。
RTX 视频超分辨率 (VSR) 可提升视频分辨率,使图像更加清晰锐利,而 RTX Video HDR 可将标准动态范围 (SDR) 视频内容转换为高动态范围 (HDR10) 视频内容,进而增强视觉效果,带来更加鲜艳、生动画面效果。
目前,用户可在使用 Chrome、Edge、Firefox 浏览器和 VLC 播放器观看视频时体验由 RTX Video 所带来的超清 4K HDR 视频。另外热门剪辑工具万兴喵影也将新增对 RTX Video HDR 的支持。用户可在搭载 NVIDIA GeForce RTX GPU 的电脑上,将 SDR 源文件转换为 HDR 视频进行编辑预览和导出,享受更加鲜艳、明亮的视觉效果。DaVinci Resolve 也将支持 RTX Video,它可将低分辨率视频文件升级至 4K 分辨率,以及将 SDR 源文件转换 HDR 视频。
总结
NVIDIA 此次品鉴会全方位为我们展示了 NVIDIA 在 RTX AI PC 的耕耘,从成为 3A 游戏大作重要体验提升的 DLSS,到如今生成式 AI、AI 视频增强等各方面创新技术。
DLSS、Reflex 与光线追踪技术的完美结合,带来了超群的游戏性能体验和出色的画面表现,让游戏玩家身临感受游戏魅力。NVIDIA ACE 为游戏 NPC 角色注入灵魂,让未来的游戏又了全新的形态。基于本地 AI 大模型的生成式创意设计和效率工具,让更多用户可以轻而易举的利用 AI 提升效率。这些都让未来触手可及,RTX AI PC 如今出货超 1 亿台,未来 NVIDIA 也将继续引领全球 AI 浪潮。
相关文章
2024-07-209阅读
2024-07-209阅读
2024-07-209阅读
2024-07-209阅读
2024-07-209阅读
2024-07-209阅读
2024-07-209阅读
2024-07-209阅读
2024-07-209阅读
2024-07-209阅读