Generatived (Beta) | Cung cấp tin tức và xu hướng mới nhất về AI sáng tạo

NVIDIA đã công bố bản beta công khai của XR AI, một khung phần mềm mã nguồn mở được thiết kế để giúp các nhà phát triển xây dựng các tác nhân thông minh cho kính AR, kính AI và tai nghe XR bằng cách sử dụng các dịch vụ AI đa phương thức.

Nền tảng này kết hợp luồng video và micro trực tiếp với các mô hình suy luận hình ảnh NVIDIA Cosmos, mô hình ngôn ngữ Nemotron và tích hợp Giao thức Ngữ cảnh Mô hình, cho phép các tác nhân hiểu môi trường và tương tác với các hệ thống doanh nghiệp.

Theo công ty, khung phần mềm này hỗ trợ các kịch bản công nghiệp, chăm sóc sức khỏe, đào tạo và dịch vụ tại hiện trường. Các nhóm nghiên cứu tại Trường Y khoa Stanford và Đại học Princeton đã khám phá các quy trình làm việc trong phòng thí nghiệm, trong khi Siemens đã nghiên cứu các trường hợp sử dụng hỗ trợ sản xuất.

XR AI cũng tích hợp với CloudXR để truyền phát nội dung không gian và hoạt động với các khung điều phối như NeMo Agent Toolkit. NVIDIA cho biết các nhà phát triển có thể triển khai trải nghiệm XR được hỗ trợ bởi AI trên nhiều thiết bị đồng thời kết nối với các công cụ doanh nghiệp và hệ thống kiến ​​thức.