top of page

Generatived (Beta) | Cung cấp tin tức và xu hướng mới nhất về AI sáng tạo

logo.png

NVIDIA KAI Scheduler cải thiện khả năng lập lịch cụm tia

Generatived

14:00 8/10/25

NVIDIA đã công bố việc tích hợp KAI Scheduler với KubeRay, nâng cao khả năng lập lịch tiên tiến cho các cụm Ray. Sự tích hợp này cho phép người dùng tận dụng các tính năng như lập lịch nhóm, tự động điều chỉnh quy mô và ưu tiên khối lượng công việc trong môi trường Ray. KAI Scheduler được thiết kế để tối ưu hóa việc phối hợp công việc, chia sẻ GPU và quản lý khối lượng công việc, hợp lý hóa các hoạt động khi tải nặng.

Người dùng Ray có thể hưởng lợi từ tính năng lập lịch nhóm, đảm bảo các khối lượng công việc Ray phân tán được khởi động đồng thời, tránh việc khởi chạy từng phần không hiệu quả. Hơn nữa, các cụm Ray có thể tự động điều chỉnh quy mô để đáp ứng các biến động về tính khả dụng và nhu cầu tài nguyên cụm. Tính năng này cho phép sử dụng tài nguyên tính toán hiệu quả hơn mà không cần điều chỉnh quy mô thủ công.

Tích hợp này cũng giới thiệu hàng đợi phân cấp, cho phép người dùng tạo hàng đợi với các mức độ ưu tiên khác nhau cho các nhóm dự án khác nhau. Hệ thống này cho phép chia sẻ tài nguyên động, cho phép các hàng đợi có mức độ ưu tiên cao hơn sử dụng các tài nguyên nhàn rỗi từ các hàng đợi có mức độ ưu tiên thấp hơn. Ưu tiên khối lượng công việc là một tính năng quan trọng khác, cho phép các tác vụ suy luận có mức độ ưu tiên cao hơn tự động chiếm quyền ưu tiên các tác vụ đào tạo hàng loạt có mức độ ưu tiên thấp hơn, duy trì khả năng phản hồi của ứng dụng.

Bộ lập lịch KAI của NVIDIA hiện đã có sẵn cho các cụm Ray. Bộ lập lịch này cung cấp một bộ công cụ giúp phân bổ tài nguyên và phản hồi thông minh hơn, đặc biệt là trong các môi trường đòi hỏi phải kết hợp đào tạo và suy luận trực tuyến. Người dùng có thể lập lịch cho các nhân viên Ray phân tán theo nhóm, ưu tiên khối lượng công việc dựa trên mức độ quan trọng và tận dụng lợi thế từ ngăn xếp thực thi được tích hợp chặt chẽ. Thiết lập kỹ thuật cho tích hợp này bao gồm một cụm Kubernetes với GPU NVIDIA A10G, NVIDIA GPU Operator và KAI Scheduler, tất cả đều được cấu hình để hoạt động liền mạch cùng nhau.

Chia sẻ bài viết này:

Tin tức mới nhất
Templafy được cấp bằng sáng chế cho công nghệ tạo tài liệu bằng trí tuệ nhân tạo.

Templafy được cấp bằng sáng chế cho công nghệ tạo tài liệu bằng trí tuệ nhân tạo.

9:00 12/3/26

Templafy, một công ty hàng đầu trong lĩnh vực tạo tài liệu bằng trí tuệ nhân tạo, vừa thông báo về việc được Văn phòng Sáng chế và Thương hiệu Hoa Kỳ cấp bằng sáng chế đầu tiên.

Veeso AI ra mắt nền tảng thiết kế AI có thể chỉnh sửa.

Veeso AI ra mắt nền tảng thiết kế AI có thể chỉnh sửa.

9:00 12/3/26

Veeso AI vừa ra mắt một nền tảng mới tại San Francisco, với mục tiêu chuyển đổi lĩnh vực thiết kế AI bằng cách loại bỏ nhu cầu sử dụng các gợi ý.

NVIDIA báo cáo sự gia tăng mạnh mẽ trong việc ứng dụng AI trên toàn ngành.

NVIDIA báo cáo sự gia tăng mạnh mẽ trong việc ứng dụng AI trên toàn ngành.

9:00 11/3/26

Việc triển khai các mô hình ngôn ngữ lớn (LLM) trong các ứng dụng AI đã dẫn đến sự phát triển của các khung suy luận phân tán giúp tăng cường khả năng mở rộng và giảm latency.

TII nâng cấp lõi NVIDIA Megatron với khả năng tích hợp Falcon.

TII nâng cấp lõi NVIDIA Megatron với khả năng tích hợp Falcon.

9:00 11/3/26

Báo cáo "Tình trạng AI" mới nhất của NVIDIA tiết lộ sự bùng nổ trong việc ứng dụng AI trên nhiều ngành công nghiệp khác nhau,

Copyright © 2024 Generatived - All right Reserved.

Chia sẻ bài viết này:

Chia sẻ bài viết này:

Generatived AI Logo

Generatived là dịch vụ cung cấp thông tin và xu hướng chuyên về Generative AI. Chúng tôi sẽ cố gắng hết sức để cung cấp thông tin về thế giới đang thay đổi nhanh chóng.

  • Facebook
  • X

Hãy theo dõi chúng tôi

Ngôn ngữ

Tin tức mới nhất
Templafy được cấp bằng sáng chế cho công nghệ tạo tài liệu bằng trí tuệ nhân tạo.

Templafy được cấp bằng sáng chế cho công nghệ tạo tài liệu bằng trí tuệ nhân tạo.

9:00 12/3/26

Templafy, một công ty hàng đầu trong lĩnh vực tạo tài liệu bằng trí tuệ nhân tạo, vừa thông báo về việc được Văn phòng Sáng chế và Thương hiệu Hoa Kỳ cấp bằng sáng chế đầu tiên.

Veeso AI ra mắt nền tảng thiết kế AI có thể chỉnh sửa.

Veeso AI ra mắt nền tảng thiết kế AI có thể chỉnh sửa.

9:00 12/3/26

Veeso AI vừa ra mắt một nền tảng mới tại San Francisco, với mục tiêu chuyển đổi lĩnh vực thiết kế AI bằng cách loại bỏ nhu cầu sử dụng các gợi ý.

NVIDIA báo cáo sự gia tăng mạnh mẽ trong việc ứng dụng AI trên toàn ngành.

NVIDIA báo cáo sự gia tăng mạnh mẽ trong việc ứng dụng AI trên toàn ngành.

9:00 11/3/26

Việc triển khai các mô hình ngôn ngữ lớn (LLM) trong các ứng dụng AI đã dẫn đến sự phát triển của các khung suy luận phân tán giúp tăng cường khả năng mở rộng và giảm latency.

TII nâng cấp lõi NVIDIA Megatron với khả năng tích hợp Falcon.

TII nâng cấp lõi NVIDIA Megatron với khả năng tích hợp Falcon.

9:00 11/3/26

Báo cáo "Tình trạng AI" mới nhất của NVIDIA tiết lộ sự bùng nổ trong việc ứng dụng AI trên nhiều ngành công nghiệp khác nhau,

bottom of page