top of page

Generatived (Beta) | Cung cấp tin tức và xu hướng mới nhất về AI sáng tạo

logo.png

Microsoft công bố Windows ML dành cho phát triển AI

Generatived

9:00 25/9/25

Microsoft đã công bố Windows ML dành cho nhà phát triển, một công cụ cho phép nhà phát triển chạy các mô hình AI cục bộ trên PC của họ. Công nghệ này hỗ trợ nhiều ngôn ngữ lập trình, bao gồm C#, C++ và Python, và được tối ưu hóa cho nhiều loại phần cứng, bao gồm CPU, NPU và GPU. Đặc biệt dành cho GPU NVIDIA RTX, Windows ML tận dụng NVIDIA TensorRT for RTX Execution Provider để tối đa hóa tiềm năng của các lõi Tensor và các cải tiến về kiến ​​trúc của GPU.

Phó Chủ tịch Microsoft Logan Ayer bày tỏ sự phấn khích về bản phát hành này, nhấn mạnh hiệu suất AI vượt trội mà Windows ML mang lại cho Windows 11 với GPU GeForce RTX và RTX Pro. Công nghệ này được thiết kế để đẩy nhanh quá trình phát triển và triển khai các ứng dụng AI mạnh mẽ ở quy mô lớn.

Windows ML được xây dựng dựa trên ONNX Runtime API và mở rộng khả năng khởi tạo động và quản lý phụ thuộc cho nhiều nền tảng phần cứng khác nhau. Nó đơn giản hóa quy trình cho các nhà phát triển ứng dụng bằng cách tự động tải xuống các nhà cung cấp thực thi cần thiết khi cần, loại bỏ nhu cầu quản lý phụ thuộc thủ công giữa các nhà cung cấp phần cứng khác nhau.

Việc tích hợp Windows ML với nhà cung cấp thực thi TensorRT cho RTX của NVIDIA mang lại nhiều lợi ích, bao gồm suy luận độ trễ thấp và thông lượng tăng đáng kể so với các triển khai trước đây. Nó cũng hỗ trợ nhiều kiến ​​trúc mô hình với khả năng biên dịch tức thời để triển khai hiệu quả đến các thiết bị người dùng cuối. Phiên bản ONNX Runtime 1.23.0, đi kèm với Windows ML, cung cấp API không phụ thuộc vào nhà cung cấp và nhà cung cấp thực thi, giúp đơn giản hóa việc lựa chọn thiết bị và tối đa hóa hiệu suất trên GPU NVIDIA.

Giờ đây, các nhà phát triển có thể biên dịch trước các thời gian chạy mô hình bằng cách sử dụng các tệp ONNX ngữ cảnh EP trong ONNX Runtime, giúp cải thiện thời gian tải trong Windows ML. Việc tối ưu hóa này đặc biệt hiệu quả vì nó giảm thời gian cần thiết cho việc suy luận mô hình. Ngoài ra, API thiết bị ONNX Runtime mới của Windows ML cho phép các nhà phát triển phân bổ các tensor dành riêng cho thiết bị với chi phí truyền dữ liệu tối thiểu, giúp cải thiện hiệu suất và thiết kế mã gọn gàng hơn.

Chia sẻ bài viết này:

Tin tức mới nhất
Google Cloud基盤拡大

Google Cloud基盤拡大

7:00 23/9/26

Google Cloud(米国カリフォルニア州)は、新興企業向けにおける「Gemini Enterprise」をはじめとしたAI基盤の利用拡大を発表した。

OpenAIが講師養成講習開始

OpenAIが講師養成講習開始

7:00 23/9/26

OpenAI(サンフランシスコ)は、AIスキルの普及を目的とした『OpenAI Academy Community Trainer Program』の試行運用を発表した。

OpenAIのCEOが国連演説

OpenAIのCEOが国連演説

7:00 23/9/26

OpenAI(サンフランシスコ)のCEOであるサム・アルトマン氏が、国連安全保障理事会において演説を行った。

OpenAIがAI会話ベンチマーク公開

OpenAIがAI会話ベンチマーク公開

7:00 22/9/26

OpenAI(サンフランシスコ)は、メンタルヘルスに関するAIモデルの応答品質を測定するオープン評価指標『MentalHealthBench』を発表した。

Copyright © 2024 Generatived - All right Reserved.

Chia sẻ bài viết này:

Chia sẻ bài viết này:

Generatived AI Logo

Generatived là dịch vụ cung cấp thông tin và xu hướng chuyên về Generative AI. Chúng tôi sẽ cố gắng hết sức để cung cấp thông tin về thế giới đang thay đổi nhanh chóng.

  • Facebook
  • X

Hãy theo dõi chúng tôi

Ngôn ngữ

Tin tức mới nhất
Google Cloud基盤拡大

Google Cloud基盤拡大

7:00 23/9/26

Google Cloud(米国カリフォルニア州)は、新興企業向けにおける「Gemini Enterprise」をはじめとしたAI基盤の利用拡大を発表した。

OpenAIが講師養成講習開始

OpenAIが講師養成講習開始

7:00 23/9/26

OpenAI(サンフランシスコ)は、AIスキルの普及を目的とした『OpenAI Academy Community Trainer Program』の試行運用を発表した。

OpenAIのCEOが国連演説

OpenAIのCEOが国連演説

7:00 23/9/26

OpenAI(サンフランシスコ)のCEOであるサム・アルトマン氏が、国連安全保障理事会において演説を行った。

OpenAIがAI会話ベンチマーク公開

OpenAIがAI会話ベンチマーク公開

7:00 22/9/26

OpenAI(サンフランシスコ)は、メンタルヘルスに関するAIモデルの応答品質を測定するオープン評価指標『MentalHealthBench』を発表した。

bottom of page