跳到正文
DEV Community· Tin Tức AI·· 2 天前AI 評分40

NVIDIA 將 Frontier LLM 整合至 Omniverse 模擬流程,加速 Physical AI 開發

Tăng tốc phát triển Physical AI: Tích hợp Frontier LLM vào Pipeline mô phỏng NVIDIA Omniverse

AI 導讀

NVIDIA 將 GPT-6 Astra、GPT-6 Sol 及 Claude Opus 5.5 接入 Omniverse,支援以提示詞建立物理模擬環境。測試以單張 NVIDIA RTX PRO 6000 GPU 同時運行 256 間病房、共 768 個 Microduck 機械人,經過 14 秒模擬後有 766 個保持動力學穩定,成功率為 99,74%。

正文

Cover image for Tăng tốc phát triển Physical AI: Tích hợp Frontier LLM vào Pipeline mô phỏng NVIDIA Omniverse

Tin Tức AI

NVIDIA Omniverse và Frontier AI

Đối với các kỹ sư Robotics và AI, một trong những rào cản lớn nhất không nằm ở mô hình học sâu mà ở pipeline tạo dữ liệu mô phỏng vật lý. Việc thiết lập thủ công hệ tọa độ khớp (kinematic chains), tinh chỉnh collision mesh và thuộc tính ma sát cho từng vật thể 3D thường tiêu tốn hàng trăm giờ làm việc. NVIDIA vừa thực hiện bước đột phá bằng việc kết nối trực tiếp các Frontier Model hàng đầu (GPT-6 Astra, GPT-6 Sol, Claude Opus 5.5) vào nền tảng Omniverse, mở ra kỷ nguyên xây dựng môi trường vật lý số hoàn toàn bằng Prompt-to-Simulation.

Kiến trúc OpenUSD và tầng dữ liệu SimReady

Điểm cốt lõi cho phép LLM tương tác chính xác với thế giới 3D là chuẩn hóa dữ liệu qua OpenUSD kết hợp thư viện SimReady Central.

Khác với các asset đồ họa thông thường chỉ mang thông tin bề mặt (surface geometry), tài sản SimReady cung cấp đầy đủ metadata vật lý:

  • Phân bố khối lượng và tensor quán tính (inertia tensor).
  • Hệ số ma sát tĩnh/động được tiền định nghĩa.
  • Lưới va chạm tối ưu hóa cho PhysX.

Nhờ cấu trúc schema nghiêm ngặt này, các AI agent có thể suy luận không gian, tính toán phản lực tiếp xúc và mô-men xoắn mà không gặp hiện tượng ảo giác (hallucination) về mặt động học.

Dữ liệu thực nghiệm và sơ đồ kỹ thuật: Những bước nhảy vọt thực tế: Từ Digital Twin nhà máy đến cụm 768 robot

Tự động hóa sinh mã điều khiển trong Isaac Sim

Thay vì viết script tay cho từng bộ điều khiển (controller), kỹ sư giờ đây giao tiếp trực tiếp với môi trường thông qua agentic loop:

  • Sinh mã tay gắp tự hành: Kỹ sư Dillon Bailey và Rishabh Chadha ứng dụng GPT-6 Sol trong Isaac Sim để tự động sinh mã điều khiển gắp nhả. Mô hình tự thiết lập các bậc tự do (DoF), tinh chỉnh lực ép và lặp qua hàng loạt kịch bản tiếp xúc bề mặt để tìm quỹ đạo tối ưu.
  • CAD to Digital Twin tự động: Tập đoàn KONGSBERG khai thác GPT-6 Astra trong dự án Falkor Surface trên hạ tầng Azure (GPU NVIDIA RTX PRO 6000 Server Edition). Agent tự đọc bản vẽ kỹ thuật, kiểm tra dung sai lắp ghép và chạy mô phỏng trước khi bàn giao thực tế.

Khảo sát bối cảnh triển khai: Phân tách tính toán và hiển thị: Kiến trúc đám mây tối ưu

Benchmark quy mô: 768 Robot song song trên một GPU

Minh chứng rõ nét nhất về hiệu năng nằm ở thử nghiệm của nhà phát triển Maziyar Panahi với công cụ Claude Code (Claude Opus 5.5):

  • Thiết lập: Lắp ráp ngữ cảnh phòng hồi sức tích cực (ICU) từ 13 asset SimReady.
  • Quy mô: Khởi tạo đồng thời 256 buồng bệnh với tổng cộng 768 robot Microduck hoạt động song song.
  • Hạ tầng: Một GPU duy nhất NVIDIA RTX PRO 6000.
  • Kết quả: Sau 14 giây mô phỏng vật lý đa luồng, 766/768 robot duy trì độ ổn định động học tuyệt đối (tỷ lệ thành công 99,74%).

Đây là bước nhảy vọt đưa Omniverse trở thành runtime lý tưởng cho các kỹ sư huấn luyện Physical AI ở quy mô công nghiệp.


🔗 Nguồn bài viết & Thảo luận đa nền tảng:

來源:DEV Community · dev.to