自2022年開(kāi)始,人工智能全面爆發(fā),AI開(kāi)始走進(jìn)到普通大眾的身邊,進(jìn)入到發(fā)展的高速路,于是我們便看到了上游產(chǎn)業(yè)對(duì)AI算力的孜孜以求,早已布局AI的硬件廠商N(yùn)VIDIA作為AI算力的“至優(yōu)解”,通過(guò)強(qiáng)大的技術(shù)能力重塑了硬件行業(yè)的格局,股價(jià)、市值在這兩年來(lái)一路飆升。截止6月中旬,NVIDIA總市值達(dá)到3.24萬(wàn)億美元,是Intel市值1296萬(wàn)億美元的25倍,是AMD市值2580億美元的12.5倍,遠(yuǎn)遠(yuǎn)甩開(kāi)了他在PC行業(yè)的兩個(gè)老對(duì)手。
在今年ComputeX大會(huì)開(kāi)幕前,NVIDIA以“加速一切”為主題召開(kāi)了演講,強(qiáng)調(diào)了AI在未來(lái)的重要性以及NVIDIA將推動(dòng)新一輪的技術(shù)進(jìn)步,并展示了產(chǎn)品路線圖,助力AI工廠、數(shù)據(jù)中心、機(jī)器人工廠降本增效。
不過(guò),這些有點(diǎn)“宏觀敘事”的介紹仿佛還離我們普通人相距甚遠(yuǎn),我們既不是大模型公司的高層決策者也不是尋求增加效率的數(shù)字化工廠主,現(xiàn)階段,NVIDIA能為我們提供什么樣的AI應(yīng)用體驗(yàn)?zāi)??這個(gè)答案我們移步到NVIDIA的展臺(tái)就能找到答案了。
總體來(lái)講,通過(guò)GeForce RTX 40系列GPU強(qiáng)大的AI性能,在本地AIGC、游戲等場(chǎng)景中可以為我們帶來(lái)前所未有的體驗(yàn),還為高性能MINI PC發(fā)布全新標(biāo)準(zhǔn)。
一、ChatRTX,本地AI助手
ChatRTX是一款運(yùn)行在本地的AI對(duì)話應(yīng)用,不過(guò)ChatRTX不同于其他軟件只有運(yùn)行加載大語(yǔ)言模型的能力,在此基礎(chǔ)上,通過(guò)GeForce RTX 40系列GPU的加速,ChatRTX還具備Retrieval-Augmented Generation檢索增強(qiáng)生成功能,可以對(duì)本地PC中的文檔、筆記等數(shù)據(jù)進(jìn)行學(xué)習(xí),并由LLM大語(yǔ)言模型驅(qū)動(dòng)進(jìn)行反饋。
例如在下面的視頻中就是針對(duì)本地?cái)?shù)據(jù)的顯示,NVIDIA ACE NIM推理微服務(wù)是在這次展會(huì)中剛剛發(fā)布的一個(gè)項(xiàng)目(文章之后我們也會(huì)介紹到),在ChatRTX中加載選擇Llama 2 13B模型,問(wèn)及NVIDIA ACE相關(guān)的問(wèn)題時(shí),其回答是完全錯(cuò)誤的,這是因?yàn)長(zhǎng)lama 2 13B模型在發(fā)布時(shí),NVIDIA ACE還沒(méi)有公布,所以它的回答是錯(cuò)誤的。但我們可以將一些含有Nvidia ACE相關(guān)的文件放到本地的硬盤(pán)中,選擇這些文件所在的目錄后,借由RTX顯卡便可以對(duì)這些文件進(jìn)行學(xué)習(xí),再問(wèn)及相同的有關(guān)NVIDIA ACE的問(wèn)題時(shí)便可以回復(fù)準(zhǔn)確,并且給出本地文件的準(zhǔn)確位置。
在視頻的后半段,還展現(xiàn)了ChatRTX的本地檢索功能,通過(guò)語(yǔ)音輸入,可以精準(zhǔn)查找出符合描述的本地圖片,例如視頻中演示人通過(guò)語(yǔ)音要求查找出“Pictures of hiking”,即戶外徒步的照片,ChatRTX便查找出了相關(guān)的本地圖片。
ChatRTX完全在本地運(yùn)行,并且不單單具備運(yùn)行各種LLM大語(yǔ)言模型的“常規(guī)功能”,還可以檢索或生成針對(duì)于用戶本地?cái)?shù)據(jù)的內(nèi)容,極大程度的拓寬了本地AI對(duì)話的應(yīng)用場(chǎng)景,并且可保護(hù)用戶的隱私。
二、AI生圖的新玩法
NVIDIA正式開(kāi)始支持廣受歡迎的ComfyUI了,并且可以支持更多更好玩的AI生圖玩法,例如我們?cè)谡古_(tái)里體驗(yàn)的“頭像生成”功能(下方視頻可查看),通過(guò)攝像頭拍攝到自己的頭像,然后根據(jù)示意圖、關(guān)鍵詞生成了我們自己的“超級(jí)英雄”形象。
根據(jù)NVIDIA自己的描述,由RTX顯卡加速下的ComfyUI性能可提升60%,生圖時(shí)間要遠(yuǎn)低于蘋(píng)果的M3 Max或M3 Pro,具體到我們這次的體驗(yàn),6張圖的生成用時(shí)大概在20秒左右。
三、DLSS 3.5,游戲幀數(shù)提升,畫(huà)面質(zhì)量提高
DLSS 3.5是在DLSS 3 幀生成技術(shù)的基礎(chǔ)上加入了光線重構(gòu)技術(shù),簡(jiǎn)單點(diǎn)來(lái)說(shuō),光線重構(gòu)技術(shù)是專為游戲中的“光線反射”開(kāi)發(fā)的AI模型,通過(guò)AI訓(xùn)練識(shí)別各類光線,解決人工設(shè)計(jì)的光線模擬質(zhì)量低、噪點(diǎn)多的問(wèn)題,從而提升游戲中光線反射的真實(shí)度、畫(huà)面質(zhì)量、清晰度以及幀數(shù)表現(xiàn)。
我們分別來(lái)看下在開(kāi)啟和關(guān)閉DLSS 3.5之后,可以為畫(huà)面與幀數(shù)帶來(lái)多大的提升。
首先是畫(huà)面光影效果:
在開(kāi)啟DLSS 3.5后,光的反射更加清晰與真實(shí)了,整個(gè)畫(huà)面也會(huì)明亮許多,尤其是物體反射的邊緣位置,模糊和鋸齒都被優(yōu)化了許多。
左:關(guān)閉DLSS 3.5 右:開(kāi)啟DLSS 3.5
同場(chǎng)景下,開(kāi)啟DLSS 3.5后,幀數(shù)從33幀上升到了110幀左右,有3倍多的幀數(shù)提升。
四、NVIDIA ACE
NVIDIA ACE生成式AI微服務(wù)旨在為游戲、娛樂(lè)、醫(yī)療、各類客戶服務(wù)等場(chǎng)景提供數(shù)字人服務(wù),其中包括:
運(yùn)行在本地RTX GPU的:
Riva ASR、TTS、NMT:用于自動(dòng)語(yǔ)音識(shí)別、文本到語(yǔ)音轉(zhuǎn)換、翻譯。
mniverse RTX:用于實(shí)時(shí)路徑追蹤,以制作逼真的皮膚和毛發(fā)。
運(yùn)行在云端服務(wù)的:
Nemotron LLM:用于語(yǔ)言理解,并根據(jù)上下文生成回復(fù)。
Audio2Face:根據(jù)音軌制作栩栩如生的面部動(dòng)畫(huà)。
另外還有兩項(xiàng)全新推出的技術(shù):
Audio2Gesture,用于根據(jù)音軌生成肢體手勢(shì)
Nemotron-3 4.5B,45億的小語(yǔ)言模型,為低延遲、本地端RTX AIPC推理設(shè)計(jì)。
現(xiàn)場(chǎng)展示了兩個(gè)Nvidia ACE的DEMO,可以看以下兩個(gè)視頻:
這是由Inworld制作的一個(gè)酒店大堂的場(chǎng)景,其中擁有諸多的NPU與場(chǎng)景供玩家進(jìn)行對(duì)話、探索,每一個(gè)角色都有自己的設(shè)定和背景故事。
第二個(gè)是由完美世界制作的DEMO,可以跟一位來(lái)自部落的公主進(jìn)行對(duì)話,支持中文。
五、G-Assist項(xiàng)目,面向游戲玩家的AI助手
NVIDIA與Studio Wildcard合作,在現(xiàn)場(chǎng)展示了《方舟:生存飛升》的G-Assist 項(xiàng)目DEMO。
在這個(gè)DEMO中,G-Assist項(xiàng)目可以幫助玩家給出在當(dāng)前進(jìn)度下的游玩建議、給出有關(guān)游戲的背景知識(shí)、某個(gè)物品該如何打造等等游戲內(nèi)相關(guān)的內(nèi)容,讓玩家可以直接在游戲中就可以“查攻略”,例如下面的視頻,演示者通過(guò)語(yǔ)音輸入,詢問(wèn)G-Assist項(xiàng)目“游戲初期最好的武器是什么?該如何制作它?”。
除了游戲中的內(nèi)容外,G-Assist項(xiàng)目還可以給出游戲的平均功耗、幀率曲線圖,也可以對(duì)G-Assist項(xiàng)目提出游戲幀率的要求,讓G-Assist項(xiàng)目根據(jù)玩家需求調(diào)整畫(huà)質(zhì),從而提升硬件效能。
Assist項(xiàng)目可以講是目前游戲場(chǎng)景中數(shù)一數(shù)二的AI助手,可以在游戲內(nèi)提供攻略,通過(guò)AI識(shí)別游戲內(nèi)容、游戲攻略,給出游玩建議,還可以對(duì)游戲的硬件性能智能調(diào)節(jié),這是實(shí)實(shí)在在為游戲玩家所設(shè)計(jì)的AI應(yīng)用。
六、SFF-Ready GeForce顯卡標(biāo)準(zhǔn)
SFF-Ready是NVIDIA為高性能小尺寸PC發(fā)布的全新標(biāo)準(zhǔn),旨在為緊湊型機(jī)箱愛(ài)好者選擇硬件時(shí)提供兼容性方面的建議。
顯卡方面,需要滿足以下條件的尺寸,并且級(jí)別在GeForce RTX 4070及以上,目前已經(jīng)有36款來(lái)自不同廠商的顯卡經(jīng)過(guò)認(rèn)證:
另外,還有23款來(lái)自不同廠商的機(jī)箱經(jīng)過(guò)SFF-Ready認(rèn)證。
七、寫(xiě)在最后
作為AI領(lǐng)域硬件的絕對(duì)龍頭,NVIDIA在軟件與技術(shù)上面也在積極提升普通用戶的使用體驗(yàn),本次的ComputeX NVIDIA親自下場(chǎng)打樣,給大家伙展示一下行業(yè)巨頭的技術(shù)能力,以RTX顯卡驅(qū)動(dòng),在游戲、創(chuàng)作、本地AI助手等方面為玩家、創(chuàng)作者提供了更多玩法。讓我們共同期待NVIDIA能夠?yàn)槲覀儙?lái)更多更好的硬件以及更有趣、更方便使用的應(yīng)用吧。
- QQ:61149512