Generatived (Beta) | Cung cấp tin tức và xu hướng mới nhất về AI sáng tạo

Tại triển lãm thương mại CES, NVIDIA đã ra mắt NVIDIA Cosmos, một nền tảng mới được thiết kế để thúc đẩy sự phát triển của các hệ thống AI vật lý như xe tự hành (AV) và robot. Cosmos tích hợp các mô hình dựa trên thế giới tạo ra, một trình phân tích mã thông báo tiên tiến và một đường ống xử lý video nhanh để bổ sung cho bộ công cụ phát triển AV hiện có của NVIDIA. Sự bổ sung này nhằm mục đích chuyển đổi cách các nhà phát triển tạo và cải thiện các mô hình AI bằng cách tận dụng các tình huống lái xe tổng hợp để mở rộng đáng kể dữ liệu đào tạo.

Sanja Fidler, phó chủ tịch nghiên cứu AI của công ty, giải thích rằng bánh đà AV Data Factory, bao gồm thu thập dữ liệu xe cộ và tái tạo 4D, sẽ được hưởng lợi từ việc tích hợp NVIDIA Omniverse và Cosmos. Các công cụ này cho phép các nhà phát triển tạo ra nhiều điều kiện lái xe khác nhau để đào tạo và đánh giá toàn diện hơn. Trong khi đó, Norm Marks, phó chủ tịch ô tô của NVIDIA, đã nêu bật những thách thức về chi phí và nguồn lực thường liên quan đến phát triển mô hình AI vật lý. Ông lưu ý rằng Cosmos hợp lý hóa quy trình này thông qua AI tạo sinh, tạo điều kiện cho việc tạo ra các mô hình AI thông minh hơn, chính xác hơn.

Một số nhà lãnh đạo trong ngành đã sử dụng Cosmos để xây dựng AI vật lý cho AV. Waabi có kế hoạch sử dụng nền tảng này để tìm kiếm và quản lý dữ liệu video, và Wayve đang đánh giá Cosmos để xác định các tình huống lái xe độc ​​đáo quan trọng đối với sự an toàn và xác thực. Foretellix có kế hoạch sử dụng Cosmos kết hợp với NVIDIA Omniverse Sensor RTX API để tạo ra các tình huống thử nghiệm có khả năng mở rộng, độ trung thực cao và dữ liệu đào tạo. Ngoài ra, sự hợp tác của Uber với NVIDIA nhằm mục đích thúc đẩy khả năng di chuyển tự động bằng cách kết hợp các tập dữ liệu lái xe phong phú của mình với các khả năng của nền tảng Cosmos và NVIDIA DGX Cloud để tạo ra các mô hình AI mạnh mẽ hơn cho các đối tác AV.

Mô hình nền tảng thế giới Cosmos hiện có thể truy cập theo giấy phép mô hình mở từ Hugging Face và danh mục NVIDIA NGC, với các dịch vụ vi mô NVIDIA NIM được tối ưu hóa hoàn toàn dự kiến ​​sẽ sớm được phát hành. Các bên quan tâm có thể xem Cosmos và kết nối với NVIDIA tại CES để biết thêm thông tin.