NVIDIA在上海举办了一场专属于GeForce RTX 40系列的品鉴盛宴。此次品鉴会,以GeForce RTX 40系列与RTX AI为核心议题,NVIDIA深入探讨了这两者在游戏及内容创作领域的广泛应用。
活动现场,NVIDIA不仅全面展示了GeForce RTX 40系列显卡在性能上的强大之处,更聚焦于其在AI技术落地应用方面的卓越实力。通过精心策划的演示与讲解,观众得以一窥GeForce RTX 40系列如何凭借其卓越的图形处理能力和AI加速技术,在游戏世界中呈现出前所未有的视觉盛宴,以及在内容创作领域提供更为高效、智能的解决方案。
这场品鉴会无疑为NVIDIA的技术实力与产品优势增添了一抹亮色,同时也为参与其中的观众带来了一场前所未有的视觉与技术的双重盛宴。
在深入探讨品鉴会之前,我们有必要对当前基于RTX GPU的AI PC(人工智能个人电脑)的发展态势进行简要概述。
根据NVIDIA的数据统计,全球范围内已有超过1亿台电脑搭载了RTX GPU,这一庞大的用户基础为RTX AI PC在市场上的广泛应用提供了坚实的基础。自RTX 20系列问世以来,NVIDIA持续致力于将RTX GPU的卓越计算能力进一步拓展至AI应用领域。在200至1300 TOPS(每秒万亿次操作)的AI算力支撑下,目前市场上已有超过500款游戏和应用软件支持RTX GPU的加速技术。同时,各大OEM厂商也积极响应,推出了超过200款型号的RTX AI笔记本电脑,以满足广大用户的不同需求。AI应用的兴起与发展也已成为全球科技产业发展的不可逆趋势,也正是在这种大环境下,RTX AI PC的市场与技术导向,自然愈发能引起整个行业以及用户的特别关注。下面我们就一起来看看NVIDIA在这场媒体品鉴会上,又为AI的落地应用,赋予了哪些超能力。
NVIDIA ACE,深度赋能游戏NPC AI智能NVIDIA ACE微服务为游戏NPC赋予了前所未有的生命力。自ComputeX2023至GDC 2024,NVIDIA持续展现了这一技术的广泛潜力。在Computex 2023上,NVIDIA首次推出了基于实时对话技术的游戏NPC演示,显著增强了NPC与玩家间的生动且真实的互动体验。在随后的Gamescom 2023上,又进一步提升了NPC的可控属性调整能力,让玩家能够更加深入地建立与虚拟角色的连接。到了CES 2024,NVIDIA利用生成式AI模型,彻底革新了玩家与虚拟角色的交互模式,实现了多个NPC间的实时对话交互。在GDC 2024大会上,NVIDIA更是将智能NPC引入叙事游戏场景中,与育碧NEO NPCs携手,通过Inworld和NVIDIA ACE共同探索互动游戏玩法的全新边界。
来到ComputeX 2024,NVIDIA 宣布全面推出 NVIDIA ACE 生成式 AI 微服务,以加速新一代数字人的发展,并将在平台上推出全新的生成式 AI 突破,这也标志着NVIDIA ACE技术将全面依托NVIDIA NIM在RTX AI PC中得以运行,极大地缩短了开发者在ACE部署上的时间成本。此技术的广泛应用不仅推动了数字人生态的蓬勃发展,更吸引了包括Aww Inc.、戴尔科技、Gumption、Hippocratic AI、英业达、掌趣科技、完美世界游戏、Reality Arts、甲尚科技、ServiceNow、Soulbotix、数字栩生和UneeQ等众多公司的开发者积极参与,他们纷纷利用ACE技术,致力于开发各类创新应用,共同推动行业进步。
▲在品鉴会上,NVIDIA再次惊艳地展示了《Covert Protocol》,这是一个技术创新性的演示项目,由领先的人工智能公司Inworld AI与NVIDIA联手打造。该项目成功地打破了非玩家角色(NPC)互动的传统界限,为用户带来了前所未有的互动体验。
此次展示的技术演示充分运用了Inworld AI公司强大的AI引擎,该引擎巧妙地集成了NVIDIA Riva的自动语音识别技术,能够实现高精度的语音到文本的转换,极大地提升了语音交互的准确性和实用性。此外,该技术还整合了NVIDIA Audio2Face技术,能够根据音频生成逼真的面部动画,为用户带来更加真实和丰富的互动体验。值得一提的是,在本次品鉴会上体验的《Covert Protocol》Demo与我们在今年早些时候初体验的Demo相比有了较大的改善和技术上的完善支持。在语言模型库上,从本次Demo的体验来看更加完善和符合人物的性格以及人设,而且NVIDIA还加入了对中文语音输入的识别,游戏内的几位NPC现在已经能够听懂玩家的中文语音对话,并根据对话提问给出切合场景以及人设的准确回答。
演示中有三个可互动的 NPC,James Park、Sophia Anderson 和 Diego Menendez,他们具有鲜明的个性和动机,并根据为他们手工定制的背景故事提供动态响应。结合传统的以物品或环境为触发机制的机制与不确定的自然语言输入,可以有效推动玩家向前完成任务,从而提供一种全新的游戏体验。这种体验是由NVIDIA ACE和Inworld AI引擎所支持的动态NPC交互机制所带来的。这些NPC的交互不仅受到环境中可交互对象的影响,而且这些可交互对象也会根据上下文提供影响NPC交互的上下文信息。在这样的游戏中,叙事是由玩家的选择所驱动的,玩家的每一个决策都有可能改变NPC的行为,从而带来不同的游戏结果。这种设计使得游戏具有更高的互动性和多样性,也使得玩家在游戏中的选择具有更高的意义和价值。
在与NVIDIA技术人员的交流中我们得知,目前NVIDIA已经可以为开发商提供一整套的基于ACE的智能NPC解决方案,开发者只需要界定智能NPC的性格、职业以及AI问答界限,就能自由地定义出风格各异的AI NPC角色。而在基于ACE的全部应用中,NVIDIA GeForce RTX GPU仍然是AI运算的核心与基础所在。
AI与游戏NVIDIA DLSS 3带来革命性的图像升级NVIDIA DLSS 3现已支持90款游戏,通过引入“帧生成”技术,进一步提升了游戏性能和画面质量。而后带有光线重建的NVIDIA DLSS 3.5技术的推出,再次刷新了游戏领域的标准。依托Tensor Core加速的AI模型,极大地增强了光追游戏的画质表现,为游戏行业的持续发展注入了新的活力。
截至目前,已有4款游戏现已支持DLSS 3.5,包括《赛博朋克2077》《心灵杀手2》《传送门》RTX版以及《第一后裔》。作为全球范围内领先的游戏图像优化技术,NVIDIA DLSS技术已被广泛应用于超过400款游戏,并且支持的游戏数量仍在持续增长中。
在我们看来,DLSS技术的持续升级不仅显著提升了游戏的画质和性能,更为玩家们带来了更为极致的游戏享受。这一切的成就,均得益于RTX GPU的强大支持以及AI技术的持续创新。展望未来,我们有理由相信,DLSS技术将继续在游戏领域中发挥关键作用,为玩家们带来更多令人惊喜的体验。
游戏演示Demo:《三角洲行动》
核心技术:DLSS 3、光追反射、Reflex
背景设置在2035年的《三角洲行动》是一款第一人称特战射击游戏,玩家可以免费跨平台畅玩。这可以说是“Delta Force”经典射击游戏的重磅回归,挑战难度全面提升。在游戏中精英特战队员踏上阿萨拉大陆,调查违法行为。同时利用战斗道具和装备,与队友通力合作,挑战极限任务。玩家可以在游戏中体验中远距离战术、秘密潜入、载具火力输出等多样战斗方式。当然,作为RTX驱动的游戏,《三角洲行动》支持光线追踪反射技术,NVIDIA DLSS 3则带来了显著的帧率加速性能。
▲现场演示的《三角洲行动》有非常优秀的实时光线追踪反射效果
游戏演示Demo:《鸣潮》
核心技术:DLSS 3、Reflex
近期非常火热的ARPG游戏《鸣潮》,是库洛游戏和NVIDIA达成合作的首款游戏。借助RTX 40系列GPU和DLSS 3技术,让《鸣潮》的游戏体验和视觉效果大升级,游戏画面更加精致、逼真,游戏运行更加顺畅,让玩家享受到了更深的沉浸感。
在游戏开发领域,DLSS 3技术已经成了一个大趋势,它为游戏开发者提供了一种实现高清画面和流畅体验的捷径。而借助NVIDIA的先进技术,库洛游戏成功打破了游戏画面和性能之间的平衡难题,让《鸣潮》在保持高质量画面的同时,还能对系统要求较低,这无疑给游戏市场注入了新的活力。
游戏演示Demo:《解限机》
核心技术:DLSS 3、Reflex
《解限机》是西山居工作室倾力打造的一款近未来科幻机甲题材多人在线竞技巨作。这款机甲射击游戏赋予了玩家前所未有的战斗体验,玩家可以解锁并驾驭各具特色的机甲战士,利用其独特的作战风格在战场上驰骋。《解限机》提供了多样化的玩法模式,无论是紧张刺激的6v6战场对决,还是短小精悍的3v3竞技场较量,都能满足玩家的不同战斗需求。值得一提的是,这款游戏在发布时将全面支持NVIDIA DLSS 3、Reflex以及光线追踪技术,对于使用GeForce RTX显卡的玩家来说,这无疑将带来前所未有的视觉盛宴,让你在游戏中体验更加逼真、流畅的画面效果,享受到极致的PC游戏体验。
游戏演示Demo:《漫威争锋》
核心技术:DLSS 3、Reflex
网易游戏精心打造的《漫威争锋》,不仅仅是一款PvP射击游戏,更是一次与漫威超级英雄团队的深度融合之旅。在这里,玩家将有机会亲手组建一支漫威全明星阵容,通过巧妙搭配各种超能力,制定出千变万化的战术策略,从而创造出独一无二的组队技能。
在这个持续进化的漫威宇宙中,玩家将踏入一个充满挑战与机遇的战场。这里的战场不仅是可破坏的,更是不断变换的,为玩家提供了无尽的竞技乐趣。在这里,你将与来自世界各地的玩家展开激烈的竞技对抗,争夺荣耀与胜利。
值得一提的是,《漫威争锋》将在首发当日即支持DLSS 3和Reflex技术,为GeForce RTX游戏玩家带来了前所未有的游戏体验。在每一场紧张刺激的多人赛事中,玩家都能享受到帧率更高、响应更迅捷的沉浸式游戏感受,仿佛置身于漫威宇宙的激战之中。
RTX AI加速内容创作AI生活无处不在除了游戏应用之外,在本次RTX 40系列的品鉴会上,NVIDIA还重点展示了RTX AI在加速内容创作以及落地AI应用上的强大优势,并用一系列的Demo演示向与会媒体展示了RTX GPU的核心AI运算加速性能。
TensorRT加速ComfyUI
ComfyUI作为全球第二大且增长势头迅猛的Stable Diffusion应用软件,凭借其基于流程节点的工作流设计与运行模式,展现了卓越的性能表现与广泛的兼容扩展性,从而深受生成式AI开发者的青睐。NVIDIA RTX GPU为ComfyUI的性能优化与兼容扩展性提供了强大的开发运行和计算加速支持,因此成为ComfyUI开发者和用户的首选工具。作为ComfyUI运行的主要环境,CUDA生态为ComfyUI与NVIDIA RTX GPU用户提供了对生成式AI模型和工作流最为广泛的支持,并通过TensorRT的Stable Diffusion运行加速技术,实现了ComfyUI上最为高效的AI绘画体验。相较于之前的版本,RTX GPU的性能提升最高可达60%,这一提升在处理速度和效率上均有着明显的体现。更为令人瞩目的是,在与MacBook Pro M3 Max的对比中,RTX GPU同样展现出了显著的性能提升幅度。
Stable Diffusion to 3D on DT
知名的B站Up主特效小哥008在品鉴会上带来了一部由生成式AI帮忙制作的短片——《特效小哥大战系列之大战河野华》。在这个短片中,特效小哥的团队在传统的3D特效制作流程上,引入了Stable Diffusion ComfyUI,为3D模型打造了高质量的AI贴图。再加上TripoSR,实现了生成式的3D模型构建。这样一来,整个3D特效的前期工作,就不再需要大量的手工绘画和雕刻,效率大大提高。
背后支持这些操作的,是由NVIDIA RTX GPU支撑的ComfyUI工具,它让工作流程变得更快,兼容性更强。再加上TensorRT加持下的Stable Diffusion,让AI绘画体验变得更快。最后,高质量的特效短片,在前期生成式AI资产准备的基础上,用上了RTX GPU加速的Blender Cycles渲染器进行合成和渲染。
这个Cycles渲染器使用NVIDIA OptiX加速,少量采样就能为建模和动画提供实时交互、照片级写实的降噪画面效果,是Blender中的最佳渲染后端。从生成式的Stable Diffusion到TripoSR,再到最终的Blender Cycles OptiX渲染,NVIDIA RTX GPU为当前主流的创意工作流提供了高效稳定的计算支持。
在设计创作领域,目前已经有超过120款由NVIDIA Studio加速的创意软件,让创作者得心应手,像特效小哥一样,能轻松应对AI创意挑战。
Stable Diffusion on LT
在品鉴会上,NVIDIA展示了基于ComfyUI平台开发的高效超人换脸工作流。该技术依托Stable Diffusion与InstantID、IPAdapter、ControlNet等先进技术的融合,实现了用户形象通过摄像头捕捉后,快速转换为高清超级英雄形象的功能。同时,该流程支持对姿态、构图、服装、背景等细节进行精确调控,以满足用户多样化的需求。Controlnet技术负责引导超人姿势的精准呈现,而InstantID则负责创建面部分析模型,用户可根据自身需求,通过描述词如“Female”、“Lightning”等进行个性化的创意修改。目前,此工作流已兼容NVIDIA的GPU及CPU设备,其中RTX GPU的性能表现尤为突出。
RTX Video,所见更好看
RTX Video作为业界领先的解决方案,其核心功能VSR视频超分辨率,旨在通过AI技术显著提升视频分辨率,使得图像呈现出更为清晰和锐利的视觉体验。随着技术的不断发展,NVIDIA进一步将HDR融入RTX Video中,并在本次品鉴会上进行了详尽的展示。
MC此前已多次提及,RTX视频超分辨率(VSR)通过其独特的算法,有效提高了视频的清晰度。而新增的RTX Video HDR功能,则进一步将标准动态范围(SDR)视频内容转换为高动态范围(HDR10)视频内容,极大地增强了视频的视觉效果,使画面更为鲜艳且富有生动性。
目前,用户在使用Chrome、Edge、Firefox浏览器和VLC播放器观看视频时,均能够体验到由RTX Video所带来的超清4K HDR视频效果,感受AI技术带来的升采样和HDR双重优化。同时,RTX Video已正式向开发者开放,热门剪辑工具如Davinci Resolve和万兴喵影也将新增对RTX Video的支持。万兴喵影的用户现在可以在搭载NVIDIA GeForce RTX GPU的电脑上,轻松将SDR源文件转换为HDR视频进行编辑、预览和导出,从而享受到更为鲜艳、明亮的视觉体验。
ChatRTX,个人聊天机器人
在会上,NVIDIA展示了ChatRTX技术Demo,凭借先进的检索增强生成(RAG)技术和NVIDIA TensorRT-LLM软件的强大支持,将前沿的生成式AI功能完美融入RTX AI PC。如今,用户能够以超乎想象的速度和便捷性,直接将个人电脑上的宝贵资料转化为数据集,并与如ChatGLM等开源大语言模型无缝对接,实现即时查询与个性化内容的迅速生成。
尤为值得关注的是,NVIDIA在最新版本中特别引入了ChatGLM3-6B这一中文大语言模型,显著提升了用户与ChatRTX进行中文交互的精准度和丰富性。此外,NVIDIA还集成了Whisper模型,使用户能够轻松实现语音识别,从而与AI模型展开更为自然、流畅的对话。同时,CLIP模型的加入进一步增强了ChatRTX的功能,使用户能够利用自然语言直接检索本地图片,实现内容的直观检索与呈现。
值得一提的是,ChatRTX的所有模型均支持完全本地运行,这一设计确保了用户数据的安全性与隐私保护。用户可放心使用ChatRTX查询个人资料,而ChatRTX凭借其优秀的运算能力和先进的AI技术,为用户提供快速且安全的回复。无论是学习、工作还是生活场景,ChatRTX均能胜任成为用户信赖的智能助手。
NVIDIA App,全家桶应用助手
NVIDIA App是 PC 游戏玩家和创作者的必备辅助工具。可以使你的 PC 及时升级到最新的 NVIDIA 驱动和技术。在全新的统一 GPU 控制中心内优化游戏和应用,通过游戏内悬浮窗提供的强大录像工具捕捉精彩时刻,并可以轻松发现最新的NVIDIA工具和软件。在我们看来,NVIDIA App将很有可能会在不久的未来取代GeForce Experience的地位。
此次品鉴会上,NVIDIA重点演示NVIDIA App内置的两个基于AI的游戏滤镜:RTX 动态亮丽和RTX HDR。RTX Dynamic Vibrance (RTX 动态亮丽)是一款AI赋能的滤镜,可提升视觉清晰度,让玩家在每款游戏中都能更好地区分游戏内元素。它不仅能在屏幕上呈现更多颜色,而且可以在不同的颜色之间实现完美平衡,避免颜色显示异常。
RTX HDR 也是一款AI赋能的全新 Freestyle 滤镜,可以将高动态范围 (HDR) 的艳丽视觉效果无缝引入到原本不支持HDR的游戏中。玩家只需拥有兼容HDR的显示器,即可在原本不支持 HDR 的游戏中体验HDR效果。
▲NVIDIA技术人员现场演示《DOTA2》游戏中RTX HDR的效果,图为RTX HDR关闭。
▲NVIDIA技术人员现场演示《DOTA2》游戏中RTX HDR的效果,图为RTX HDR开启。可以看到开启RTX HDR之后,游戏的画质几乎得到了完美的呈现,色彩显示更艳丽,更清晰。
赢在未来的RTX AI PC就当前的RTX AI PC现状而言,游戏领域内它凭借DLSS、强劲的实时光线追踪性能以及Reflex等核心技术傲视群雄;在内容创作领域,RTX GPU几乎实现了对绝大部分主流设计创作软件的加速支持,事半功倍的工作效率也是无出其右;在AI落地应用领域,在TensorRT的扩展支持下,无论是Stable Diffusion WEBUI还是ComfyUI的AI计算都有着明显的性能和效率的双领先。也正是如此,RTX AI PC才能在AIPC的大圈子内脱颖而出,凭借强悍的性能和广泛的应用加速兼容性超越了一众竞争对手,在市场上绽放异彩。
从本次品鉴会的综观来看,很明显NVIDIA针对RTX GPU,特别是RTX 40系列,采取了“双轨并行”的发展战略,一方面聚焦于游戏性能的持续提升与创新,另一方面则着眼于AI应用的深入布局,特别是生成式AI的实际应用前景。通过品鉴会的亲身体验,我们不难发现,除了在游戏市场保持一贯的强势表现外,NVIDIA的RTX GPU在AI应用领域也展现出了卓越的实力,无论是内容创作的AI加速还是日常生活应用的AI智能助手,RTX AI PC均在其中占据举足轻重的地位,甚至在某些领域内具有不可替代性。
此外,RTX AI PC也正不断拓展其应用领域,其强大的计算能力和高效的AI处理能力,在科研、医疗、金融等高端领域亦展现出巨大的潜力。例如,在科研领域,RTX AI PC能够协助科学家快速模拟复杂的物理和化学过程,为科学发现提供强有力的支持。在医疗领域,RTX AI PC则在医学影像处理、疾病诊断等方面发挥重要作用,有助于医生更精准地判断病情,提升医疗质量。
NVIDIA在推出RTX GPU时,也充分考虑了用户需求与体验。无论是游戏玩家还是专业用户,均可根据自身需求选择合适的RTX GPU型号来搭建自己的RTX AI PC。同时,NVIDIA还提供了丰富的软件生态以确保用户在使用RTX AI PC时能够享受到更佳的体验。这,也正是它得以在市场立足的奠基石。我们也完全相信,RTX的未来,会有更大更广阔的天地,供其纵横驰骋——构建世界的AI,以及你的AI PC!