在COMPUTEX 2024開展前夕，NVIDIA創始人兼CEO黃仁勛做面向專業領域的主題演講同時，NVIDIA在游戲GPU、AI也發生了全面的變化，無論臺式機還是筆記本都將進一步向AI PC靠攏。在前期的媒體溝通會上，我們了解到了一系列NVIDIA對游戲的新玩法，在COMPUTEX 2024開展之際，不妨一起展望下未來一段時間內，我們還能嘗到什么樣的游戲新技術。
真正的游戲助理，Project G-Assist
在所有技術更新中，GeForce AI助手Project G-Assist讓人印象最為深刻，你可以理解Project G-Assist是一個人工智能，它的特長就是以終端的視角陪你玩游戲，將在游戲中扮演協同助理的角色，相當于多了一個AI陪你玩游戲。
舉個例子，Project G-Assist有點類似于桌游中的游戲引導，會根據游戲設定、系統判斷目前玩家的游戲狀態，比如提醒玩家在荒野的場景下可能需要準備什么樣合適的武器，或者以對話的形式幫玩家查詢網上攻略，協助游戲順暢進行。
聽起來是不是很神奇？Project G-Assist這套技術基于語音、文本、游戲畫面和大模型同事實現，通過LLM大模型感知玩家在當下的游戲狀態，同時通過與游戲知識數據庫連接，對游戲下一步操作提供意見。
在NVIDIA的演示DEMO中，以《方舟：生存進化》作為例子，在游戲初期需要尋找裝備的狀態下，Project G-Assist會提供對應的游戲建議，比如適合的任務、前期合理的武器，再比如屏幕上遇到恐龍的時候，是建議回避，還是去馴服，完全是一個游戲老手的狀態。
由于Project G-Assist擁有認知上下文的能力，它還會進一步分析技能點、制作菜單欄的使用方式，更進一步引導玩家做出合適的選擇?；蛘咄ㄟ^與游戲官方的百科進行連接，提示玩家在關卡、位置中漏掉的任務或者隱藏裝備。
這讓筆者聯想到，如果能在Switch《塞爾達：王國之淚》中也能有類似的功能，呀哈哈是不是一個都跑不掉…
回到主題，提供游戲攻略僅僅是Project G-Assist功能的一部分，它更厲害的地方在于還是個游戲優化助手，可以根據PC性能調節游戲畫質，從而獲得流暢、節能的雙重效果。這里NVIDIA以《賽博朋克2077》舉例，通過與Project G-Assist對話，就能自動對游戲中畫質進行優化，包括開啟GPU超頻、開啟NVIDIA Reflex選項減少系統延遲等等。
這還不夠，Project G-Assist還可以通過實時繪制游戲幀率、功耗、系統響應延遲等狀態的表格，即刻提出改善方案。比如玩家使用筆記本在不插電的情況下游戲，那么Project G-Assist就會設置一個在節能狀態下保證游戲以60FPS流暢運行的方法，讓筆記本在游戲中獲得更長的續航能力。
除此之外，Project G-Assist還可以協助開啟顯示器的HDR、G-SYNC功能，給玩家解釋游戲設置中DLSS、DLAA的區別，幫助玩家做更詳細的設置等等。與此同時，NVIDIA也對Project G-Assist做了更長遠的展望，比如在圖片編輯、視頻剪輯，以及更為復雜的創作工作流中，是否也可以加入Project G-Assist，讓工作和學習效率變得更高。
NVIDIA ACE NIM首秀
另一個技術更新是關于NVIDIA ACE的，NVIDIA更新了一套名為NVIDIA ACE NIM推理微服務，用于加快開發者部署時間，將原本的數周壓縮到數分鐘之內，并幫助用戶在本地設備上實現高質量推理、自然語言理解、語音合成、面部動畫等等。
NVIDIA ACE本身包括了一系列套件，包括：
NVIDIA Riva ASR、TTS和NMT：用于自然語音識別、文本到語音轉換和翻譯；
NVIDIA Nemotron LLM：用于語義理解、上下文生成；
NVIDIA Audio2Face：基于音軌的面部動畫生成；
NVIDIA Omniverse RTX：提供實時光追、路徑追蹤下的皮膚和頭發生成。
這次還追加了2個新技術：
NVIDIA Audio2Gesture：根據音軌生成肢體語言手勢；
NVIDIA Nemotron-3 4.5B：本地化小語言模型SLM，為RTX AI PC提供低延遲響應。
NVIDIA表示，目前NVIDIA ACE NIM推理微服務已經展開部署，可以在超過1億臺RTX AI PC上實現對應功能，進而加速開發流程。在COMPUTEX期間，NVIDIA ACE NIM在PC上的游戲首秀將在和Inworld AI合作開發的Covert Protocol技術Demo中亮相，演示在PC本地運行的NVIDIA Audio2Face和NVIDIA Riva自動語音識別技術。
其中提到的小語言模型SLM是由微軟于NVIDIA合作共同完成，可以直接應用到Windows原生和網絡應用中，通過API訪問GPU實現更快的加速，并進一步支持時下火熱的Windows Copilot Runtime驅動的檢索增加生成(RAG)功能。
SLM小語言模型給Windows開發提供了更多可能性，在離線的狀態下實現內容摘要、內容生成和任務自動化變得更為便利，開發者也可以通過檢索增加生成(RAG)API利用應用特有的數據源，并根據應用需求調整小語言模型的行為和功能。
DLSS 3.5再獲更新
支持DLSS 3.5游戲陣營再次擴大了，這一次是計劃在8月30日發布的《星球大戰：亡命之徒》，由育碧制作。另一個游戲則是《漫威爭鋒》，計劃支持DLSS 3技術。目前為止，已經有超過500款游戲和應用支持NVIDIA DLSS，幾乎每周都會有游戲推出NVIDIA DLSS、Reflex、路徑追蹤技術相關的游戲，GeForce RTX仍然是當下游戲GPU的最優選擇。
DLSS 3.5通過光線重建技術、DLSS超分辨率采樣、DLSS幀生成、Reflex技術協同工作，可以最大限度發揮GPU的圖像石之靈和性能，從而獲得理想的游戲效果。在《星球大戰：亡命之徒》中，NVIDIA、LucasFilm Games、Massive Entertainment合作，將RTX直接照明（RTXDI）、光線追蹤反射、光線追蹤陰影、光線追蹤全局照明都進行了增強，并通過Reflex實現更低的系統延遲，從而獲得不錯的游戲效果。游戲也不近可以通過GeForce RTX PC體驗，也可以通過NVIDIA的在線游戲服務GeForce NOW獲得。
《漫威爭鋒》則提供了對DLSS 3的支持，意味著GeForce RTX 30系列的GPU也可以火力全開。這是一套PvP合集游戲，登場角色包括漫威的復仇者聯盟、銀河護衛隊、X戰警等角色，DLSS為其提供了更高的游戲幀率和更低的系統響應。
SFF PC新規：讓游戲主機變小
在GPU尺寸上，NVIDIA干了一件讓所有玩家喜聞樂見的事，那就是縮小GPU尺寸。NVIDIA的主要目的是幫助玩家打造一套可以不占桌面，或者帶去Lan Party的小尺寸PC設計，名為Small Form Factor PC，即SFF PC。
小尺寸意味著SFF PC的布置和走線都需要更多的考究，需要考慮線纜、元器件的尺寸、布局，NVIDIA已經給顯卡、機箱制造商提供了SFF-Ready設計指南，我們常見的華碩、索泰、微星、酷冷至尊等品牌都在列表中。
SFF-Ready設計指南包含了詳細的GPU橫置與豎置參考意見，并給RTX 4070級別以上的GPU提供了詳細的外形尺寸參考，包括2.5個槽位，長度304mm，高度151mm等等。
事實上，市面上的一些GPU已經很好的符合了這個標準，比如RTX 4070 Founders Edition，ASUS PRIME GeForce RTX 4070 SUPER OC Edition 12GB GDDR6X等等，NVIDIA在官方指引中提供了詳細的GPU列表。
當然，機箱也給予了推薦，照著買沒有錯的。
MOD更帶勁了
最后是NVIDIA RTX Remix更新，是MOD玩家的最愛。NVIDIA RTX Remix是一個Mod平臺，可利用全景光線追蹤技術、NVIDIA DLSS 3.5和物理精確材質，重制經典的DirectX 8和DirectX 9游戲。RTX Remix包括一個Runtime渲染器和RTX Remix工具包應用，可簡化游戲資產和材質的修改過程。
早在去年，NVIDIA開源了RTX Remix Runtime，可以讓MOD制作者自行擴展游戲兼容性、提升渲染效率。NVIDIA宣布在今年晚些時候還將開源RTX Remix Toolkit，讓MOD制作者可以能夠更簡化的進行資產替代和場景重建，RTX Remix也將支持更多文件格式，以及RTX Remix AI紋理工具。
與此同時，RTX Remix Toolkit還將通過REST API實現于Blender、Hammer、ComfyUI等專業工具的實時連接，從而實現更高效的MOD制作流程。目前為止，已經有超過2萬名MOD制作者在RTX Remix收益，通過RTX Remix Showcase Discord完成了超過130款的MOD RTX游戲重置，在一年時間內，這樣的成績是相當厲害的。
另外，NVIDIA RTX Video這項熱門AI超分辨率功能，現在已作為 SDK 對所有開發者開放，可在Google Chrome、Microsoft Edge和Mozilla Firefox瀏覽器中使用。它幫助開發者原生集成AI，進行采樣、銳化、降低壓縮失真和高動態范圍(HDR)轉換。
視頻編輯軟件Blackmagic Design的DaVinci Resolve和Wondershare Filmora即將支持RTX Video，它將使視頻編輯用戶能夠將低質量視頻文件升級至4K分辨率，并將SDR源文件轉換為HDR視頻。此外，免費媒體播放器VLC media即將在其現有的超分辨率功能基礎之上添加 RTX Video HDR 的支持。
雖說距離新一代GeForce RTX更新還有一些時間，但不會阻礙NVIDIA在AI領域一路高歌，從DLSS 3.5到NVIDIA ACE上的更新，都可以看到NVIDIA更執著讓消費端也向AI靠近。相比起核顯筆記本只有兩位數的TOPS，GeForce RTX GPU三位數起步，甚至超過1000的TOPS無疑更符合人們對AI PC的暢想。無論是AI游戲還是AI創作，當下和未來一段時間，RTX AI PC無疑都是最合適的選擇。而在COMPUTEX 2024上，我們只需要關注在N卡范圍內，什么樣新品更適合我們。
在今年臺北國際電腦展（Computex 2024）上，未來有望普及的AI PC，無疑是本場展會最重要的焦點之一，各大筆電廠商展示最新款機型，不僅顯露出未來筆電的新樣貌，也展現AI加持下的筆電新能耐。
究竟有哪些重要變化？ 在Computex大會現場各廠商展示的多款新型筆電產品中，最讓大家印象深刻的是，Windows筆電上新增了專為AI設計的Copilot按鍵，通常設置于鍵盤區右邊Alt鍵的右方，可以快速叫出Windows 11 內建的Windows Copilot功能，讓用戶一鍵就可以啟動AI體驗。
可以想見的是，這個按鈕會在AI PC世代占有重要的地位。 比起過往Windows 8的實體Home鍵的變化，有更大的意義存在。
另一重要變化在于，專門為AI應用而設計的NPU（Neural Processing Unit），如今這項應用開始擴及Windows個人電腦領域。
例如，電腦處理器大廠Intel去年底推出Meteor Lake移動處理器，其架構包含CPU、GPU與NPU，就率先獲得多家筆電廠商采用，在2023年底就開始陸續有產品上市。
因此在今年Computex電腦展上，Intel就在攤位上特別陳列了多家廠商的新品，包括：微軟Surface Laptop 6、Dell XPS 14（9440）、HP Elitebook 840G11，以及宏碁Swift Go 16、華碩Vivobook S 14（S5406）、技嘉Aorus 15、微星Prestige 13 AI Evo， 還有聯想IdeaPad Slim 5i、LG Gram Pro、三星Galaxy Book4 Pro、Dynabook Portege X40L-M等，特別的是，Intel不只是陳列各廠商產品，更希望讓大家可以透過這些產品先目睹NPU能力的新應用。
關于NPU的實際應用場景，是大家都關注的重點，畢竟，過去個人電腦上沒有NPU，AI相關運算只能依靠CPU與GPU，尤其是具有平行運算能力的GPU，但隨著現今生成式AI技術的興起，專為加速AI應用而設計的NPU，也成為了新的解決方案。
在今年6月的Computex電腦展上，我們看到Intel展區中就有多項NPU相關技術與應用的實機展示：
首先我們要介紹的應用相當特別，是要保護AI應用程序不被竄改。
在今年Computex的Intel展區上，特別以一臺電腦展示一段影片，內容是本機端AI應用程序被竄改、污染的資安風險。
根據現場導覽人員的說明，影片中主要呈現出，當用戶在AI應用程序中提出問題，詢問「臺灣銀行網銀服務的官方網站網址是什么？」 在一般情況下，AI應用程序可回答出正確的網址。
不過，一旦AI模型、知識庫沒有受到保護，遭到竄改或下毒，這時用戶再次詢問同樣的問題，由于AI應用程序受到操弄，因此我們看到AI應用程序此時的回答，是一個錯誤的可疑網址。
關于上述這項AI PC上的資安應用，其實是由趨勢技術所提供，該公司亦在Computex設置展區并展示這方面的解決方案，因此他們的現場工作人員在導覽時，也向我們提供進一步的說明。
基本上，隨著NPU、開源小型LLM的發展，如今在筆電上這樣的邊緣運算，將讓攻擊面變得更寬廣。 因此，趨勢科技已經針對AI PC提供資安解決方案，強調Security for AI，聚焦保護AI應用程序不被竄改。
他們解釋，因為現今大眾普遍使用的生成式AI服務，主要是將數據傳回至云端才能處理，但云端上的AI其實都有著企業等級的安全防護，相對而言，當電腦有了NPU之后，各種AI應用程序就能直接在PC上執行，只是本機端的AI模型也就成為新的風險。
另一方面，他們也有提出AI for Security的應用，是發展出由NPU驅動的電子郵件防護。 這是因為，趨勢科技過去提供的云端Email防護解決方案，有些功能需要將郵件內容去識別化后送至云端處理，像是要識別詐騙郵件等功能，而且這樣的應用需要用戶同意后才能送至云端分析。 若運用電腦本身NPU來處理，不僅同樣可以帶來保護，也具有更高的隱私。
另一展示情境為手勢控制（Gesture Control）的應用。 由于現在不只手機，運動相機也都首度開始加入手勢控制的能力，在筆電上的應用發展又是如何？
在一臺技嘉Aorus 15筆電上所展示的應用場景，是以愛奇藝的Windows App的手勢操作功能為例，根據現場人員導覽時的說明，該程序在前幾年已經加入手勢識別AI模型，背后主要利用CPU與GPU來處理分析，可以通過視頻鏡頭來識別手勢，像是掌心張開對著計算機代表停止播放，OK手勢代表繼續播放，而現在能使用NPU來獨立處理， 時時分析鏡頭前的手勢操作。 因此，與過去運算處理方式相比，將可減輕CPU與GPU的負擔，讓這些資源可去處理其他工作任務。
關于眼球追蹤（Eye-Tracking）這樣的技術，多年前我們已經看過這類技術應用的展示，但至今其應用仍遲遲未能普及，今年Computex我們又看到有這樣的展示。
在現場一臺Dynabook Portege X40L-M電腦上，展示了兩個眼球追蹤的場景，首先是一個書架的畫面，現場人員向我們說明，我們只要在電腦前，用眼睛注視著畫面上的任何一本書，筆電鏡頭就能偵測用戶的目光焦點，當我們實際這么做，盯著中間右邊的樂譜書籍時，該物件真的就會稍微放大，望向其他書時也會有同樣效果， 如同用眼睛操控鼠標光標一樣的效果。
另一個是X光照片的畫面，我們也依據現場導覽人員的指出，當我們頭部朝向筆電靠近，屏幕上的圖片就會跟著放大，看到更清楚的X光斷層掃瞄細節，當我們頭部往后，圖片則會縮小。 現場導覽人員也說明，有了NPU可以讓人眼追蹤時的AI運算，更具能耗上的效益。
談到AI PC，大家對于微軟提出的Copilot+ PC應該相當印象深刻，而我們在Intel展區也看到一臺微軟Surface Laptop 6筆電，正展示著Windows 11 24H2將提供給AI筆電的微軟AI應用程序，包括實時字幕翻譯Live Captions、Windows Studio Effects。 盡管這臺電腦尚不符合微軟對Copilot+ PC的定義，但依然能夠展示這些AI應用程序的效果。
例如，筆電上正播放Computex 2024主題演說的YouTube影片，我們可以看到以Live Captions的效果是，可將演講內容實時產生英文字幕于筆電畫面的上方。 現場工作人員向我們表示，在這項技術下，包括偵測到的語音，輔助字母的產生，都是在電腦上完成，并不會與云端或微軟共享。
同時，這臺電腦另一半畫面也展示了啟用視頻影像下的Camera effect效果，可快速自動對焦與模糊背景，并使視訊的影像更清晰。
自從ChatGPT與Gemini等生成式AI服務的出現，現在大家對于上網使用生成式AI服務，命令AI寫出一段文章，已經并不陌生。 不過，之后用戶也可在不聯網的情況之下，利用自己筆電上的AI應用程序，來執行生成式AI應用。
例如，在Intle展區另一臺LG Gram Pro筆電上，所展示的應用就是寫作助手。 電腦畫面上呈現出使用Word編輯文章時，能另外叫出一個具Secure Local機制的寫作助手，現場人員表示，其特色在于不用將文字內容上傳生成式AI服務，就能快速調整一段寫作內容。
從寫作助手的功能菜單來看，界面上提供了很多寫作風格的切換，包括正式、輕松、簡單，簡單扼要，或是需要擴展，甚至也能調整內容為具說服性、具敘述性，或是具信息性。 又或是調整為幽默、嚴肅、樂觀、悲觀的語氣。 此外也有翻譯能力，包括中文、英文、西班牙語、日文、韓文等。
綜合來看，雖然上述采用Intel Meteor Lake處理器的產品，其NPU運算能力只有11.5 TOPS，但可預期的是，各家處理器大廠正持續發力，積極提升NPU運算能力。
這是因為今年5月微軟、Intel已經透露，未來AI PC的門檻至少要達40 TOPS，目前Intel也已經預告下一代Lunar Lake，其NPU將提升超過40 TOPS。
而在高通與AMD方面，這兩家廠商的動作更快，近期已開始推出NPU運算能力更高的處理器，像是高通主打Arm架構的Snapdragon X1系列筆電處理器，其NPU效能達45 TOPS，AMD也已經新發表Ryzen AI系列處理器，其NPU效能達50 TOPS。
再者，繪圖AI芯片大廠Nvidia目前也在積極發力，他們認為NPU在效能與支持性上與GPU相比仍有落差，僅依靠NPU只能算基本的AI PC，因此該公司也持續針對AI筆電提供更強的GPU來執行更多AI功能。
綜觀上述發展，聚焦GPU、NPU的運算效能提升，應該會是接下來新世代筆電持續強調的重點。
我們在這次Computex電腦展上，也首度看到這些新品在臺亮相。 例如，在宏碁展區所擺設的一臺Swift 14 AI的筆電，該產品就是搭載擁有45 TOPS的Sanpdragon X Eltie處理器。
另外在Computex上華碩的展區中，我們也看到一臺ProArt PX13，搭載的就是擁有50 TOPS的AMD Ryzen AI 9 HX 370處理器，并還搭載了Nvidia GeFrce3 RTX 4070顯示芯片，可增至320 AI TOPS。
在AI發展大勢之下，由于新世代Windows筆電、PC的處理器都將變成整合CPU、GPU與NPU的架構，從上述各式AI應用方式來看，確實讓新世代個人裝置有了相當大的變化。
但大家可能也會想到的是，現在生成式AI服務已獲大眾普遍應用，不論是OpenAI的ChatGPT，Google的Gemini，以及主打AI繪圖的Stable Diffusion等，很多應用其實只要我們連上網絡就能使用，而且訂閱這些云服務后，可獲得更強的能力。
因此，最大重點應該是放在「在設備端執行」這件事，例如，如果不想將敏感數據上傳至云端服務，就是大家可能看重的面向; 還有一些輔助性的功能，像是手勢與眼球的追蹤，視頻上的美肌、自動背景去背與更換等，也很適合交由NPU來執行，讓CPU與GPU的資源可以留給其他任務。
值得一提的是，以上述的手勢控制、眼球追蹤而言，這些技術其實發展已久，像是Intel在10年前提出Ultrabook概念后，當時還會強調由攝影鏡頭、軟件、傳感器所構成的RealSense體感操作技術，聚焦于聚焦于人臉、手勢的捕捉，不只要讓辨識、追蹤變得更精準，更希望為下一代電腦的操作體驗帶來革新。 然而，后續這類應用，只有Windows Hello登入技術變得普及，
如今隨著NPU的應用領域開始擴及Windows電腦產品，由于各大處理器廠商均強調，新的NPU能讓處理器以更節能的方式，在筆電上執行AI運算任務。
因此，另一大重點就是「NPU運算功耗低于GPU」的特性，而我們也期盼，在這樣的節能效果之下，不只可以發揮多元的AI應用，同時還能促進筆電的體感應用變得真正普及。
當然，PC端應用的發展也值得觀察，畢竟PC不像筆電本身就內建視訊鏡頭與麥克風等，或許All in One（AIO）機型也會再次成為市場焦點。 此外，由于PC處理器的運算能力比筆電更好，可負荷更高的AI運算，如何推動更多元化的應用，將是各家電腦廠商的機會與挑戰。
無論如何，盡管AI PC可能要等到2025年才會在市場上正式發酵，但初期我們可從上述各式NPU的應用場景，來看出當前AI筆電的新特性，后續可以想見的是，由于筆記各家廠商已經紛紛表態，要提供更好的AI運算能力，要針對AI PC提供更多應用，屆時我們應該能見識到AI PC真正的能耐。