NVIDIA เปิดตัวโมเดล Generative AI และไมโครเซอร์วิส NIM สำหรับ OpenUSD บริการใหม่ช่วยเร่งเวิร์กโฟลว์ของ Universal Scene Description สำหรับการพัฒนา Digital Twins และวิทยาการหุ่นยนต์ทางอุตสาหกรรม

NVIDIA ประกาศความก้าวหน้าครั้งสำคัญในวันนี้เกี่ยวกับ Universal Scene Description หรือ OpenUSD ซึ่งเป็นการขยายเฟรมเวิร์กการแลกเปลี่ยนข้อมูล Universal 3D ไปใช้กับหุ่นยนต์ การออกแบบอุตสาหกรรมและวิศวกรรม และเร่งความสามารถของนักพัฒนาในการสร้างโลกเสมือนจริงที่มีความแม่นยำสูงสำหรับวิวัฒนาการครั้งต่อไปของ AI   OpenUSD ใหม่ ใช้งานผ่าน Generative AI และเฟรมเวิร์กการพัฒนาที่เร่งความเร็วด้วย NVIDIA ซึ่งอยู่บนแพลตฟอร์ม NVIDIA Omniverse ขณะนี้อุตสาหกรรมต่างๆ จำนวนมากสามารถพัฒนาแอปพลิเคชันเพื่อแสดงภาพการออกแบบอุตสาหกรรมและโครงการทางวิศวกรรม สำหรับการจำลองสภาพแวดล้อมเพื่อสร้างคลื่นลูกต่อไปของ  AI ที่มีร่างกาย และหุ่นยนต์   ไมโครเซอร์วิส NVIDIA NIM  สำหรับโมเดล AI ที่สามารถสร้างภาษา OpenUSD เพื่อตอบคำถามของผู้ใช้ สร้างโค้ด OpenUSD Python ใช้วัสดุกับวัตถุ 3 มิติ และทำความเข้าใจพื้นที่ 3 มิติ และฟิสิกส์ เพื่อช่วยเร่งการพัฒนาฝาแฝดดิจิทัล นอกจากนี้ ตัวเชื่อมต่อ USD ใหม่ กับรูปแบบข้อมูลหุ่นยนต์และการจำลองทางอุตสาหกรรม และเครื่องมือสำหรับนักพัฒนายังช่วยให้ผู้ใช้สตรีมชุดข้อมูล  NVIDIA RTX™ ray traced เต็มรูปแบบไปยัง Apple Vision Pro   มิสเตอร์ เรฟ เลบาเรเดียน รองประธานฝ่าย Omniverse และเทคโนโลยีการจำลองของ NVIDIA กล่าวว่า “ความรุ่งเรืองของ AI สำหรับอุตสาหกรรมหนักมาถึงแล้ว ด้วยการปรับปรุงและการเข้าถึงไมโครเซอร์วิสของ NVIDIA NIM ที่นำมาสู่ OpenUSD อุตสาหกรรมทุกประเภทสามารถสร้างโลกเสมือนจริงและฝาแฝดดิจิทัลเพื่อขับเคลื่อนนวัตกรรม พร้อมเตรียมพร้อมสำหรับคลื่นลูกใหม่ของ AI สำหรับวิทยาการหุ่นยนต์”

Generative AI ที่ใช้งานกับ USD ขับเคลื่อนด้วย NVIDIA NIM

โมเดล Generative AI แรกของโลกสำหรับการพัฒนา OpenUSD ที่พัฒนาโดย NVIDIA จะวางจำหน่ายในรูปแบบ ไมโครเซอร์วิส NVIDIA NIM โมเดลดังกล่าวช่วยให้นักพัฒนาสามารถรวม copilots และ AI agents ทั่วไปเข้ากับเวิร์กโฟลว์ USD ขยายความเป็นไปได้ในโลก 3 มิติ และช่วยเร่งการนำ USD มาใช้ในขอบเขตใหม่ของภาคอุตสาหกรรม เช่น การผลิต ยานยนต์ และหุ่นยนต์ ไมโครเซอร์วิสที่พร้อมแสดงตัวอย่าง ได้แก่:

•  USD Code NIM : ตอบคำถามความรู้ทั่วไปเกี่ยวกับ OpenUSD และสร้างโค้ด OpenUSD-Python โดยอัตโนมัติตามข้อความแจ้งที่สามารถป้อนลงในแอปสำหรับการดู OpenUSD เช่น USDView จาก Pixar หรือแอปพลิเคชันที่ใช้ NVIDIA Omniverse Kit เพื่อแสดงภาพข้อมูล 3D ที่เกี่ยวข้อง
• USD Search NIM : ช่วยให้นักพัฒนาสามารถค้นหาไลบรารีขนาดใหญ่ของ OpenUSD, 3D และข้อมูลรูปภาพโดยใช้ภาษาธรรมชาติหรืออินพุตรูปภาพ
• USD Validate NIM : ตรวจสอบความเข้ากันได้ของไฟล์ที่อัปโหลดกับเวอร์ชันที่เผยแพร่ของ OpenUSD และสร้างรูปภาพที่เรนเดอร์ด้วย RTX อย่างสมบูรณ์ และ path-traced image ซึ่งขับเคลื่อนโดย NVIDIA Omniverse Cloud API

ไมโครเซอร์วิส NIM ที่เพิ่งประกาศใหม่ซึ่งจะพร้อมใช้งานเร็ว ๆ นี้ ได้แก่:

• USD Layout NIM : ช่วยให้ผู้ใช้สามารถรวบรวมฉากที่ใช้ OpenUSD จากด้วยพร้อมท์ข้อความที่อยู่บนพื้นฐานของ spatial intelligence
• USD SmartMaterial NIM : ทำนายและใช้วัสดุที่เหมือนจริงกับวัตถุการออกแบบที่ใช้ซอฟต์แวร์ CAD (Computer-Aided Design) ต่าง ๆ
• fVDB Mesh Generation NIM : สร้าง mesh ที่ใช้ OpenUSD เรนเดอร์โดย Omniverse Cloud API จากข้อมูลพอยต์คลาวด์
• fVDB Physics Super-Res NIM : ดำเนินการ AI SuperResolution บนเฟรมหรือลำดับของเฟรมเพื่อสร้างการจำลองฟิสิกส์ที่มีความละเอียดสูงตาม OpenUSD
• fVDB NeRF-XL NIM : ช่วยสร้างโมเดล 3D ขนาดใหญ่จากภาพ 2D หลาย ๆ ภาพใน OpenUSD โดยใช้ Omniverse Cloud APIs

Foxconn ผู้นำด้านการผลิตระดับโลกที่มีโรงงานมากกว่า 170 แห่งทั่วโลก ได้รับประโยชน์จากแพลตฟอร์มคอมพิวเตอร์ของ NVIDIA โดยใช้ไมโครเซอร์วิส NIM และ Omniverse เพื่อสร้างฝาแฝดทางดิจิทัลของโรงงานที่อยู่ระหว่างการพัฒนา “ฝาแฝดทางดิจิทัลจะช่วยให้เราเร่งการผลิตในระลอกต่อไปของอุตสาหกรรมการผลิตและเครื่องจักรอัตโนมัติ” Dr. Zhe Shi หัวหน้าฝ่ายดิจิทัลของ Foxconn และหัวหน้าแพลตฟอร์มการผลิตอัจฉริยะกล่าว “NVIDIA Omniverse และไมโครเซอร์วิส NIM ใหม่ จะทำให้การพัฒนาฝาแฝดทางดิจิทัลเป็นไปในวงกว้างมากขึ้น และช่วยให้ทีมงานของเราสร้างโรงงานเสมือนจริงบนพื้นฐานกายภาพได้เร็วกว่าที่เคย” WPP ผู้นำระดับโลกด้านบริษัทด้านการตลาดและบริการการสื่อสาร เป็นผู้บุกเบิกไมโครเซอร์วิส NIM ของ USD Search และ USD Code โดยนำไปใช้ในกระบวนการสร้างเนื้อหาที่เปิดใช้งานด้วย AI เชิงสร้างสรรค์ที่สร้างขึ้นบน NVIDIA Omniverse สำหรับลูกค้า เช่น บริษัท Coca-Cola “ความงดงามของนวัตกรรมคือการที่มันเข้ากันได้กับวิธีการทำงานของเรา และมันใช้ประโยชน์จากมาตรฐานแบบเปิด ซึ่งไม่เพียงเร่งการทำงานในอนาคตเท่านั้น แต่ยังช่วยให้เราสามารถต่อยอดและขยายประโยชน์ของการลงทุนก่อนหน้านี้ทั้งหมดของเราในมาตรฐาน เช่น OpenUSD” Stephan Pretourius ประธานเจ้าหน้าที่ฝ่ายเทคโนโลยีของ WPP กล่าว “การใช้ไมโครเซอร์วิส NVIDIA NIM กับ NVIDIA Omniverse ทำให้เราสามารถเปิดตัวเครื่องมือการผลิตที่เป็นนวัตกรรมใหม่ร่วมกับบริษัทต่าง ๆ เช่นบริษัท Coca-Cola ได้รวดเร็วอย่างที่ไม่เคยมีมาก่อน”

USD Connector นำ Generative AI มาสู่อุตสาหกรรมอื่น ๆ

USD Connector ใหม่สำหรับรูปแบบข้อมูลหุ่นยนต์และการสตรีมข้อมูลไปยัง Apple Vision Pro เปิดประตูสู่การทำงานร่วมกันของ OpenUSD และการเขียนขั้นสูงไปยังอุตสาหกรรมต่าง ๆ มากขึ้น NVIDIA และ  ซีเมนส์ ผู้นำระดับโลกในด้านระบบอัตโนมัติทางอุตสาหกรรมและซอฟต์แวร์ กำลังขยายขอบเขตการทำงานร่วมกัน เพื่ออำนวยความสะดวกให้กับปริมาณงานทางอุตสาหกรรมมากขึ้นโดยใช้ OpenUSD ซีเมนส์จะไปป์ไลน์ OpenUSD เข้ากับพอร์ตโฟลิโอเทคโนโลยีการจำลอง Simcenter เพื่อสนับสนุนการตัดสินใจตามหลักฐานเชิงประจักษ์และการทำงานร่วมกันระหว่างผู้มีส่วนได้ส่วนเสียหลัก การบูรณาการนี้ช่วยให้สามารถแสดงภาพข้อมูลการจำลองที่ซับซ้อนได้แบบเรียลไทม์และมีความเที่ยงตรงสูง โดยให้ข้อมูลเชิงลึกที่ลึกซึ้งยิ่งขึ้นเกี่ยวกับประสิทธิภาพของผลิตภัณฑ์ภายในสภาพแวดล้อมการทำงานในโลกแห่งความเป็นจริง งานนี้จะต่อยอดความพยายามของซีเมนส์ในการรวม Omniverse เข้ากับพอร์ตโฟลิโอการจัดการวงจรชีวิตผลิตภัณฑ์ Teamcenter NVIDIA ยังได้เปิดตัวตัวเชื่อมต่อจาก Unified Robotics Description Format เป็น OpenUSD ช่วยให้นักวิทยาการหุ่นยนต์สามารถนำข้อมูลหุ่นยนต์ของตนข้ามแอปพลิเคชันต่างๆ ได้อย่างราบรื่น รวมถึงสำหรับการออกแบบ การจำลอง และ Reinforcement Learning เพื่อก้าวต่อไปของระบบนิเวศ OpenUSD ทาง NVIDIA ได้ประกาศชุดพัฒนาซอฟต์แวร์ OpenUSD Exchange ช่วยให้นักพัฒนาสามารถสร้างตัวเชื่อมต่อข้อมูล OpenUSD ที่แข็งแกร่งของตนเองได้ เครื่องมือสำหรับนักพัฒนาและ API ใหม่เพื่อสตรีมฉาก OpenUSD ขนาดใหญ่จากแอปพลิเคชันที่สร้างบนแพลตฟอร์ม Omniverse  ไปจนถึง Apple Vision Pro ผ่านทาง เครือข่ายการจัดส่งกราฟิก NVIDIA มีจำหน่ายแล้ว ลงทะเบียนเพื่อรับข้อมูล “OpenUSD กำลังปฏิวัติวิธีที่เราสร้างและโต้ตอบกับเนื้อหา 3 มิติ” Steve May ประธานเจ้าหน้าที่ฝ่ายเทคโนโลยีของ Pixar และประธาน Alliance for OpenUSD (AOUSD) กล่าว “ขณะนี้ ด้วยบริการและ API ใหม่เหล่านี้สำหรับ OpenUSD ที่สร้างโดย NVIDIA เราคาดว่าจะเห็นการเติบโตที่รวดเร็วและการยอมรับ USD ซึ่งปูทางให้ผู้ใช้และอุตสาหกรรมใหม่ ๆ มีส่วนร่วมกับระบบนิเวศของเราได้ง่ายขึ้น” https://youtu.be/jX4RsRwg7VA?si=fM5-X5nlu19bNfTN

โมเมนตัมระบบนิเวศ OpenUSD

เมื่อปีที่แล้ว NVIDIA ได้ร่วมก่อตั้ง AOUSD ร่วมกับ Pixar, Adobe, Apple และ Autodesk โดยตอนนี้ทาง AOUSD, NVIDIA และผู้ร่วมมือรายอื่น ๆ ได้ประกาศเปิดตัว OpenUSD ใหม่ ใหม่ ความคืบหน้าของข้อกำหนดหลักของ OpenUSD และสมาชิกรายใหม่

ความพร้อมใช้งาน

ไมโครเซอร์วิส USD Search, USD Code และ USD Validate NIM มีให้ดูตัวอย่างบน NVIDIA API catalog - ขณะนี้มีตัวเชื่อมต่อ OpenUSD to URD พร้อมให้ใช้งานแล้วบน NVIDIA Isaac Sim นักพัฒนาสามารถเริ่มต้นและบูรณาการ Generative AI เข้ากับเวิร์กโฟลว์ OpenUSD เข้ากับเครื่องมือพัฒนา Omniverse ใหม่ และขั้นตอนการทำงานอ้างอิงสำหรับสร้างไปป์ไลน์ข้อมูลสังเคราะห์ที่เปิดใช้งาน AI ด้วย OpenUSD  เรียนรู้เพิ่มเติมเกี่ยวกับ Generative AI ล่าสุดและการประมวลผลแบบเร่งความเร็วโดย รับฟังการสนทนาอย่างเป็นกันเองของ Jensen Huang, CEO และผู้ก่อตั้ง NVIDIA ที่ SIGGRAPH การประชุมคอมพิวเตอร์กราฟิกชั้นนำ ซึ่งจะจัดขึ้นจนถึงวันที่ 1 สิงหาคม ที่เมืองเดนเวอร์