擴展現實 (XR) – NVIDIA 技術博客

借助 NVIDIA RTX PRO Blackwell 臺式機 GPU 實現 Rivian 新一代XR 設計

Tue, 06 May 2025 06:55:13 +0000

對于不斷突破 XR 界限的專業人士而言，打造身臨其境的高保真體驗始終充滿挑戰。在渲染大型數據集和驅動最新的超高分辨率高級 XR 頭顯設備時，要求嚴苛的 XR 工作流程突破了性能極限。同時集成先進的人工智能功能，提供更具交互性和直觀性的體驗，進一步提高了標準。雖然技術上存在挑戰，但這些因素正在推動硬件和軟件創新，以在汽車設計、建筑設計、制造等領域充分發揮 XR 的潛力。 NVIDIA RTX PRO Blackwell 臺式機 GPU 在 NVIDIA GTC 2025 上的發布標志著我們向前邁出了重要一步。這些新一代 GPU 具有高達 600W 的功率和 96 GB 的 GDDR7 顯存，增加了 Tensor 和 CUDA 核心，并且 PCIe Gen5 支持使用雙 GPU 的 VR-SLI 功能，這是一項重大進步。 RTX PRO Blackwell GPU…

Source

]]>

使用 NVIDIA AI Blueprint 構建實時多模態 XR 應用以進行視頻搜索和摘要

Tue, 11 Mar 2025 06:43:16 +0000

隨著生成式 AI 和視覺基礎模型的最新進展，VLM 呈現了新一波視覺計算浪潮，其中模型能夠實現高度復雜的感知和深度上下文理解。這些智能解決方案為增強 XR 設置中的語義理解提供了一種很有前景的方法。通過集成 VLM，開發者可以顯著改進 XR 應用解釋用戶操作以及與用戶操作交互的方式，使其響應速度更快、更直觀。本文將向您介紹如何利用 NVIDIA AI Blueprint 進行視頻搜索和摘要，以及如何增強 Blueprint 以支持 XR 環境中的音頻。我們介紹了實時語音識別和沉浸式交互的分步過程——從設置環境到無縫集成。借助對話式 AI 功能增強 XR 應用，為用戶帶來更加身臨其境的體驗。通過創建在 XR 環境中提供 Q&A 功能的生成式 AI 智能體，用戶可以更自然地進行交互并獲得即時幫助。多模態 AI 智能體處理并合成多種輸入模式，例如視覺數據 (例如 XR…

Source

]]>

利用 NVIDIA Omniverse 空間流，在 XR 中體驗數字孿生技術

Mon, 06 Jan 2025 08:02:51 +0000

空間計算體驗正在轉變我們與數據的交互方式，通過擴展現實 (XR) 和數字孿生等技術連接物理和數字世界。這些進步使得分析和理解復雜數據集的方法更加直觀、更加身臨其境。本文介紹了開發者現在如何在沉浸式環境中使用基于通用場景描述 (Universal Scene Description，OpenUSD) 的 NVIDIA Omniverse 數據集，從而將理解和見解提升到新的水平。打造沉浸式空間體驗面臨獨特的挑戰。通常，XR 設備無法以逼真且引人入勝的體驗所需的細節水平渲染復雜的數據集。硬件限制會降低保真度，導致難以保留復雜的細節。為了應對這些挑戰，NVIDIA 在 CES 2025 上宣布，Omniverse 平臺現在包含 Omniverse 數字孿生工作流的空間流，可實現具有出色視覺保真度和性能的 XR 體驗。合作伙伴 Accenture、

Source

]]>

使用人工智能開發更小、更輕的擴展現實眼鏡

Fri, 14 Jun 2024 09:08:59 +0000

如今的沉浸式擴展現實（XR）設備需要重型光學器件和顯示器用頭帶固定，這增加了體積并形成了社會障礙。在設想的未來，頭帶將不再是必要的。在過去的幾年里，NVIDIA Research 一直在與斯坦福大學計算成像小組合作，研究如何開發更小、更輕的 XR 眼鏡，該小組由 Gordon Wetzstein 教授領導。 XR 眼鏡光學設計中最重要的規則是顯示器應該靠近用戶的面部，以實現緊湊和輕便的設計，而圖像應該看起來更遠。隨著顯示器移動得離眼睛更遠，重心也發生了變化。然而，人眼無法正確感知離得太近的顯示器，因此必須使用透鏡等光學系統將圖像中繼到舒適的觀看距離。為了使該系統有效，顯示器需要位于透鏡的焦距附近，這反諷地需要將顯示器放置得更遠（圖 1）。一種解決方案是使用折疊光路的煎餅透鏡，這種方法引入了新的問題，如像差和額外的重量。光波導也經常用于實現緊湊型 XR 眼鏡，

Source

]]>

借助由 NVIDIA 提供支持的新款 Varjo XR-4 系列頭顯設備，增強沉浸式體驗

Thu, 22 Feb 2024 07:19:41 +0000

借助集成 NVIDIA 技術的 Varjo 新款 XR-4 系列頭顯設備，開發者和企業現在可以部署如生的虛擬現實和混合現實體驗。這些 XR 頭顯設備與肉眼所能看到的分辨率相匹配，為用戶提供逼真的視覺保真度和性能。最新的 XR-4 系列頭顯設備支持 NVIDIA Omniverse 并由 NVIDIA GPU 提供支持，為擴展現實 (XR) 開發者和用戶解鎖高保真照片級真實感和實時光線追蹤功能。 Varjo XR-4 系列借助 Omniverse 的高級功能，為關鍵幀提供更逼真的沉浸式功能到通用場景描述 (OpenUSD) 訓練、模擬、設計、工程和醫療健康等領域的管道和應用程序。得益于 XR-4 系列的逼真視覺體驗，公共部門空間等領域的高壓力訓練場景變得更加準確和逼真。現在，設計評審通過實時反射和準確表示任何模型來提供逼真的效果，為設計師提供更加身臨其境和準確的評審過程。

Source

]]>