NVIDIA 將 Frontier LLM 整合至 Omniverse 模擬流程,加速 Physical AI 開發
Tăng tốc phát triển Physical AI: Tích hợp Frontier LLM vào Pipeline mô phỏng NVIDIA Omniverse
NVIDIA 將 GPT-6 Astra、GPT-6 Sol 及 Claude Opus 5.5 接入 Omniverse,支援以提示詞建立物理模擬環境。測試以單張 NVIDIA RTX PRO 6000 GPU 同時運行 256 間病房、共 768 個 Microduck 機械人,經過 14 秒模擬後有 766 個保持動力學穩定,成功率為 99,74%。
Đối với các kỹ sư Robotics và AI, một trong những rào cản lớn nhất không nằm ở mô hình học sâu mà ở pipeline tạo dữ liệu mô phỏng vật lý. Việc thiết lập thủ công hệ tọa độ khớp (kinematic chains), tinh chỉnh collision mesh và thuộc tính ma sát cho từng vật thể 3D thường tiêu tốn hàng trăm giờ làm việc. NVIDIA vừa thực hiện bước đột phá bằng việc kết nối trực tiếp các Frontier Model hàng đầu (GPT-6 Astra, GPT-6 Sol, Claude Opus 5.5) vào nền tảng Omniverse, mở ra kỷ nguyên xây dựng môi trường vật lý số hoàn toàn bằng Prompt-to-Simulation.
Kiến trúc OpenUSD và tầng dữ liệu SimReady
Điểm cốt lõi cho phép LLM tương tác chính xác với thế giới 3D là chuẩn hóa dữ liệu qua OpenUSD kết hợp thư viện SimReady Central.
Khác với các asset đồ họa thông thường chỉ mang thông tin bề mặt (surface geometry), tài sản SimReady cung cấp đầy đủ metadata vật lý:
- Phân bố khối lượng và tensor quán tính (inertia tensor).
- Hệ số ma sát tĩnh/động được tiền định nghĩa.
- Lưới va chạm tối ưu hóa cho PhysX.
Nhờ cấu trúc schema nghiêm ngặt này, các AI agent có thể suy luận không gian, tính toán phản lực tiếp xúc và mô-men xoắn mà không gặp hiện tượng ảo giác (hallucination) về mặt động học.
Tự động hóa sinh mã điều khiển trong Isaac Sim
Thay vì viết script tay cho từng bộ điều khiển (controller), kỹ sư giờ đây giao tiếp trực tiếp với môi trường thông qua agentic loop:
- Sinh mã tay gắp tự hành: Kỹ sư Dillon Bailey và Rishabh Chadha ứng dụng GPT-6 Sol trong Isaac Sim để tự động sinh mã điều khiển gắp nhả. Mô hình tự thiết lập các bậc tự do (DoF), tinh chỉnh lực ép và lặp qua hàng loạt kịch bản tiếp xúc bề mặt để tìm quỹ đạo tối ưu.
- CAD to Digital Twin tự động: Tập đoàn KONGSBERG khai thác GPT-6 Astra trong dự án Falkor Surface trên hạ tầng Azure (GPU NVIDIA RTX PRO 6000 Server Edition). Agent tự đọc bản vẽ kỹ thuật, kiểm tra dung sai lắp ghép và chạy mô phỏng trước khi bàn giao thực tế.
Benchmark quy mô: 768 Robot song song trên một GPU
Minh chứng rõ nét nhất về hiệu năng nằm ở thử nghiệm của nhà phát triển Maziyar Panahi với công cụ Claude Code (Claude Opus 5.5):
- Thiết lập: Lắp ráp ngữ cảnh phòng hồi sức tích cực (ICU) từ 13 asset SimReady.
- Quy mô: Khởi tạo đồng thời 256 buồng bệnh với tổng cộng 768 robot Microduck hoạt động song song.
- Hạ tầng: Một GPU duy nhất NVIDIA RTX PRO 6000.
- Kết quả: Sau 14 giây mô phỏng vật lý đa luồng, 766/768 robot duy trì độ ổn định động học tuyệt đối (tỷ lệ thành công 99,74%).
Đây là bước nhảy vọt đưa Omniverse trở thành runtime lý tưởng cho các kỹ sư huấn luyện Physical AI ở quy mô công nghiệp.
🔗 Nguồn bài viết & Thảo luận đa nền tảng:
- 🌐 Bài viết gốc đầy đủ: NVIDIA Omniverse bắt tay Frontier AI: Tự động hóa thiết kế robot và Digital Twin bằng ngôn ngữ tự nhiên
- ⚡ Đọc nhanh thời sự trên Telegra.ph: https://telegra.ph/Bản-tin-nhanh-NVIDIA-đưa-Frontier-AI-vào-Omniverse-tự-động-hóa-Digital-Twin-và-Robotics-bằng-câu-lệnh-11-20
- 📝 Tài liệu phân tích chuyên sâu trên HackMD: https://hackmd.io/@tintucai/rJHet4T0ze
- 🐙 Bản tóm lược nghiên cứu trên GitHub Gist: https://gist.github.com/tintucai/99d73e0dcd84cb46b04c56720a16ee9b
來源:DEV Community · dev.to


