Generatived (Beta) | Cung cấp tin tức và xu hướng mới nhất về AI sáng tạo

NVIDIA hôm nay đã công bố sáng kiến ​​mới nhất của mình, NVIDIA Cosmos, một nền tảng được thiết kế để đẩy nhanh quá trình phát triển AI vật lý. Nền tảng này giới thiệu một họ Mô hình nền tảng thế giới (WFM) mới, mạng nơ-ron có thể dự đoán và tạo video nhận biết vật lý. Các mô hình này nhằm mục đích giúp các nhà phát triển tạo ra các rô-bốt tiên tiến và xe tự hành (AV).

Thông báo được đưa ra tại CES nhấn mạnh đến sự sẵn có của bộ Cosmos WFM đầu tiên để mô phỏng dựa trên vật lý và tạo dữ liệu tổng hợp. Các mô hình này được bổ sung bởi các trình phân tích dữ liệu nâng cao, lan can, đường ống xử lý dữ liệu nhanh và một khuôn khổ để tùy chỉnh và tối ưu hóa mô hình. Giấy phép mô hình mở của NVIDIA cho phép các nhà nghiên cứu và nhà phát triển sử dụng miễn phí các mô hình Cosmos cho mục đích thương mại, nhằm mục đích đẩy nhanh quá trình phát triển các ứng dụng AI dựa trên vật lý trong các doanh nghiệp ở mọi quy mô.

Nền tảng Cosmos của NVIDIA sẵn sàng hỗ trợ cộng đồng AI vật lý bằng cách cung cấp các công cụ cho phát triển công nghệ robot và AV. Các mô hình có thể được sử dụng trực tiếp để tạo dữ liệu tổng hợp hoặc được tinh chỉnh bằng khuôn khổ NVIDIA NeMo cho các ứng dụng cụ thể. Các công ty như 1X, Agility Robotics, XPENG, Uber và Waabi hiện đang tận dụng Cosmos để nâng cao quy trình phát triển mô hình của họ. Các nhà phát triển có thể truy cập các mô hình tự hồi quy và khuếch tán của Cosmos thông qua danh mục NVIDIA API và tải xuống các họ mô hình từ danh mục NVIDIA NGC và Hugging Face.

Cosmos World Foundation Model là một bộ mô hình mở toàn diện bao gồm các mô hình biến áp khuếch tán và tự hồi quy để tạo video. Các mô hình này được đào tạo trên nhiều tập dữ liệu khác nhau để mô phỏng chính xác các tương tác vật lý trong môi trường ảo. Các mô hình được cung cấp theo ba loại: Nano, Super và Ultra, để giải quyết các nhu cầu về hiệu suất và chất lượng khác nhau. Khi được tích hợp với đầu ra NVIDIA Omniverse 3D, các mô hình có thể tạo dữ liệu video tổng hợp chất lượng cao, điều này rất cần thiết để đào tạo các mô hình robot và nhận thức AV. Các mô hình hiện có thể truy cập được trong danh mục NGC và Hugging Face cũng cung cấp các công cụ bổ sung để tinh chỉnh lời nhắc văn bản và tối ưu hóa giải mã video cho các ứng dụng thực tế tăng cường.

Nền tảng Cosmos của NVIDIA không chỉ là một công cụ để phát triển mô hình mà còn là minh chứng cho cam kết của công ty đối với các hoạt động AI có trách nhiệm. Nền tảng này bao gồm Cosmos Guardrails, đảm bảo sử dụng AI an toàn và có hệ thống đóng dấu tích hợp để nhận dạng nội dung do AI tạo ra. Để biết thêm thông tin về quá trình phát triển và khả năng của mô hình Cosmos, NVIDIA Research đã công bố một bài báo nghiên cứu chi tiết và cung cấp một thẻ mô hình về Hugging Face.