• <xmp id="om0om">
  • <table id="om0om"><noscript id="om0om"></noscript></table>
  • 模擬/建模/設計

    使用 OpenUSD 和 Digital Twins 創造沉浸式活動

    ?

    Moment Factory 是一家全球性的多媒體娛樂工作室,它結合了視頻、照明、建筑、聲音、軟件和互動方面的專業知識,為世界各地的觀眾創造身臨其境的體驗。

    從現場表演、多媒體表演到互動裝置,Moment Factory 以一些最令人敬畏和娛樂的體驗而聞名,這些體驗將人們聚集在現實世界中。其中包括令人眼花繚亂的視覺效果,如Billie Eilish 的 比以往任何時候都幸福 世界巡回演唱會Lumina 夜間漫步在世界各地的自然遺址,以及AT&T Discovery District

    Moment Factory 擁有一支由 400 多名專業人士組成的團隊,在蒙特利爾、東京、巴黎、紐約和新加坡設有辦事處,已成為娛樂業的全球領導者。

    Billie Eilish on stage during her Happier Than Ever world tour
    圖 1。Billie Eilish 聘請 Moment Factory 為她監督創意指導、舞臺設計和內容創作比以往任何時候都幸福 世界巡回演唱會

    使用 Open 簡化沉浸式體驗開發 USD

    將這些體驗付諸實踐需要擁有不同專業的高技能專家組成的大型團隊,他們都使用獨特的工具。為了在高度復雜的生產過程中實現最佳效率,Moment Factory 希望實現一個可互操作的開放數據格式和開發平臺,該平臺可以無縫集成從概念到操作的各個方面。

    Moment Factory 選擇了 Universal Scene Description,也被稱為 OpenUSD 作為解決方案。Open USD 是一個可擴展的框架和生態系統,用于描述、組成、模擬和在 3D 世界中協作。NVIDIA Omniverse 是一個軟件平臺,使團隊能夠開發基于開放 USD 的 3D 工作流和應用程序。它提供了一個統一的環境,通過與 Moment Factory 工具的實時連接,實現了數字孿生的實時可視化和協作。

    將 Open USD 與 Omniverse 結合使用,使 Moment Factory 能夠統一來自其各種數字內容創建(DCC)工具的數據,以形成真實世界環境的 數字孿生。團隊的每個成員都可以與這個數字孿生互動,并在不影響其他元素的情況下迭代項目的各個方面。

    例如,場景制作者可以使用 Vectorworks,這是一款三維設計軟件。同時,在同一場景中,AV(視聽)和照明設計師可以使用 Moment Factory 的專有現場娛樂操作系統和虛擬投影映射軟件來處理照明和投影儀,即 X-Agora

    同時,藝術家和設計師可以使用 Epic Games 虛幻引擎、 Blender 和 Adobe Photoshop 等工具在場景中渲染和創建引人注目的視覺效果,而不會影響仍在進行的項目的各個層。

    Moment Factory 創新團隊的解決方案架構師兼項目負責人 Arnaud Grosjean 表示:“ USD 的獨特之處在于,它可以分解成更小的部分,使人們能夠在保持聯系的同時處理項目中自己獨特的部分。”。“它的靈活性和互操作性使我們能夠創建強大的自定義 3D 管道。”

    Diagram of USD scenes composition, including nondestructive layers such as venue, scenography, AV, and sensor data from diverse data sources.
    圖 2: USD 場景由無損層組成,如場地、場景、AV 和來自不同數據源的傳感器數據

    數字孿生模擬真實世界的體驗

    為了在將沉浸式事件部署到現實世界之前模擬它們,Moment Factory 正在開發其在 NVIDIA Omniverse 中的應用。Omniverse 是一個計算平臺,使團隊能夠開發基于開放 USD 的 3D 工作流和應用程序,它提供了一個統一的環境,可以實時可視化和協作數字孿生 與 DCC 工具的連接

    他們創建的第一個數字孿生是 Blackbox,它是一個實驗和原型空間,他們可以在現實世界部署之前預覽身臨其境的體驗片段。它是項目生命周期幾乎每個階段的關鍵空間,從概念和設計到集成和運營。

    為了構建 Blackbox 的數字孿生,Moment Factory 使用了基于 NVIDIA Omniverse 的完全可定制的基礎應用程序 – USD Composer

    Moment Factory digital twin
    圖 3。Blackbox 中的實時視頻投影和照明實時反映在 Blackbox 的數字孿生中,如右側屏幕所示

    安裝的虛擬副本使團隊能夠在項目上運行無數次迭代,以測試各種因素。他們還可以更好地向潛在客戶銷售沉浸式體驗的概念,這些客戶可以在虛擬環境中進行現場制作之前觀看演出。

    在構建大規模沉浸式體驗的過程中,關鍵挑戰之一是在各個利益相關者之間達成共識并管理變革。

    Grosjean 解釋道:“每個人都對場景的結構有自己的想法,所以我們需要一種方法,在一個統一、動態的環境中,讓每個參與項目的人都保持一致。”。“通過數字孿生,可以與各個核心專業知識的利益相關者一起測試和模擬潛在的想法。”

    作為 CAD 繪圖員、AV 設計師、互動設計師和其他人為 Blackbox 的數字孿生做出的貢獻,藝術家和 2D/3D 設計師可以渲染和實驗身臨其境的動作體驗的美麗鏡頭。

    如果您想查看 Blackbox 的數字孿生在運行,請參加 9 月 13 日(星期三)的 Omniverse 與 Moment Factory 的直播活動

    開發 Omniverse 連接器和擴展

    Moment Factory 正在不斷構建和測試 Omniverse 的擴展,為他們的數字孿生帶來新的功能和可能性。

    他們為 X-Agora 開發了 Omniverse 連接器,這是他們專有的多顯示器軟件,允許您設計、規劃和操作演出。該軟件現在有一個 Nucleus 連接的工作實現, USD 導入/導出,以及早期的實時模式實現。

    視頻投影是沉浸式活動的關鍵元素。該團隊經常會嘗試將視覺內容映射和投影到建筑表面、風景元素上,有時甚至是移動物體上,將靜態空間轉化為動態和迷人的環境。

    NDI,即網絡設計接口,是由 NewTek 開發的一種流行的 IP 視頻協議。它允許高效的實時視頻制作和跨互連設備和系統的流傳輸。Moment Factory 在他們的沉浸式體驗中,通常使用視頻電纜將媒體系統連接到物理投影儀。而有了 NDI,他們可以在虛擬場所內復制這種連接,有效地以數字方式模擬整個體驗。

    為了實現 Omniverse RTX 渲染器與其創意內容之間的無縫連接,Moment Factory 為 Omniverse 開發了 NDI 擴展。該擴展不僅支持視頻投影,還允許團隊模擬 LED 墻、屏幕和像素場,以反映他們在數字孿生中的真實世界設置。

    與開發的擴展 Omniverse Kit,還允許用戶將視頻源用作動態紋理。Moment Factory 的開發人員使用 kit-cv-video-examplekit-dynamic texture-example 來開發擴展。

    任何人都可以訪問和使用 Moment Factory 的 Omniverse-NDI-extension 在 GitHub 上,并將其安裝在 Omniverse Launcher 上,或使用以下工具啟動:

    $ ./link_app.bat --app create
    $ ./app/omni.create.bat --/rtx/ecoMode/enabled=false --ext-folder exts --enable mf.ov.ndi
    

    Omniverse 中的擴展 可作為可重復使用的組件或工具,開發人員可以構建這些組件或工具來加速和添加 3D 工作流的新功能。它們可以用于簡單任務,如隨機化對象,也可以用于實現更復雜的工作流,如可視化腳本。

    該團隊還開發了一個用于轉換MPDCI,一個描述多項目鉆機的 VESA 標準,到 USD ,稱為Omniverse-MPCDI-converter。他們目前正在測試的擴展MVR (My Virtual Rig)GDTF (General Device Type Format) 將照明設備和鉆機導入其數字孿生的轉換器。

    更引人注目的是激光雷達 UDP 模擬器的擴展,該擴展正在開發中,以實現 Omniverse 中的傳感器模擬,并將合成數據連接到激光雷達兼容軟件。

    您現在可以在工作流程中使用 Moment Factory 的 NDI 和 MPDCI 擴展。敬請關注即將推出的新擴展。

    為了構建像 Moment Factory 這樣的擴展,您需要 開始使用所有的 Omniverse 開發者資源,包括文檔、教程、USD 資源、GitHub 示例等。

    下載標準許可證,開始使用NVIDIA Omniverse,或學習如何Omniverse 企業可以連接您的團隊。

    開發人員可以查看這些 Omniverse 資源 開始在平臺上建設。

    通過訂閱 新聞稿 并在領英上關注 NVIDIA Omniverse。

    欲了解更多信息,請查看我們的論壇

    ?

    0

    標簽

    人人超碰97caoporen国产