NVIDIA「DLSS 3」可能是 RTX 40 限定技術 10/12 號推出

NVIDIA 新推出的 RTX 40、Ada Lovelace GPU，在核心架構中加入 Optical Flow Accelerator，這也是新一代「DLSS 3」所需的主要加速功能。

Ada Lovelace GPU 的第四代 Tensor Cores 加入 Optical Flow Accelerator 單元，而 DLSS 3 將採用 Optical Multi Frame Generation 新技術。




新一代 DLSS 3 將需要 4 個輸入：現在與之前的遊戲畫面，以及 Optical Flow Field 由 Ada 的 Optical Flow Accelerator 產生，還有遊戲引擎的資料像是 Motion Vectors 與 depth。

Ada 的 Optical Flow Accelerator 單元，將分析遊戲影像與計算 Optical Flow Field。Optical Flow Field 會追蹤向素的移動方向與速度，從 frame 1 到 frame 2 的連續分析。

Optical Flow Accelerator 能夠追蹤像素級的資料，例如：像素、反射、陰影、光線，這些資料不被遊戲引擎納入 Motion Vector 資料當中。像是下圖的影像，就記錄了陰影在畫面移動的方向與速度。




也就是說 Optical Flow Accelerator 能夠準確的追蹤像素級的效果，而 DLSS 3 依然會使用遊戲引擎提供的 Motion Vectors，以確保能夠完整的追蹤遊戲場景的幾何變化。而下圖則是顯示出，遊戲的 Motion Vectors 可以有效的追蹤摩托車的物體運動，但是他的陰影卻沒被追蹤導致陰影異常。




針對每個像素，DLSS 的 AI 神經網路會決定如何使用遊戲引擎的 Motion Vectors 以及 Optical Flow Field 的資料，通過兩者資料的互相運用，DLSS 能夠夠精準的重建遊戲幾何與效果。




當使用 DLSS 3 技術，通過 AI 能夠重建第一個畫面的 3/4 影像，並在第二畫面時完全由 DLSS 產生，也就是說整體來看 DLSS 3 能夠重建 7/8 的畫面像素，藉此大幅提升遊戲效能。




目前 NVIDIA 展示的效能來看，通過 DLSS 3 加速，微軟模擬飛行可達到 200% 的效能提升，而 2077 則可有著 400% 的效能加速。




DLSS 3 將在 10/12 號推出，目前已有 35 款遊戲或程式支援，玩家可以稍微期待日後的測試。但目前新聞稿與 Blog 資料來看，DLSS 3 似乎是 RTX 40 系列顯卡獨有的功能，但 Optical Flow 其實 Turing 與 Ampere 架構也支援，但就要看 NVIDIA 如何解說了。

• A Plague Tale: Requiem
• Atomic Heart
• Black Myth: Wukong
• Bright Memory: Infinite
• Chernobylite
• Conqueror's Blade
• Cyberpunk 2077
• Dakar Rally
• Deliver Us Mars
• Destroy All Humans! 2 -Reprobed
• Dying Light 2 Stay Human
• F1® 22
• F.I.S.T.: Forged In Shadow Torch
• Frostbite Engine
• HITMAN 3
• Hogwarts Legacy
• ICARUS
• Jurassic World Evolution 2
• Justice
• Loopmancer
• Marauders
• Microsoft Flight Simulator
• Midnight Ghost Hunt
• Mount & Blade II: Bannerlord
• Naraka Bladepoint
• NVIDIA Omniverse™
• NVIDIA Racer RTX
• PERISH
• Portal With RTX
• Ripout
• S.T.A.L.K.E.R 2: Heart of Chornobyl
• Scathe
• Sword and Fairy 7
• SYNCED
• The Lord of the Rings: Gollum
• The Witcher 3: Wild Hunt
• THRONE AND LIBERTY
• Tower of Fantasy
• Unity
• Unreal Engine 4 & 5
• Warhammer 40,000: Darktide