top of page

Generatived (Beta) | Cung cấp tin tức và xu hướng mới nhất về AI sáng tạo

logo.png

Microsoft công bố Windows ML dành cho phát triển AI

Generatived

9:00 25/9/25

Microsoft đã công bố Windows ML dành cho nhà phát triển, một công cụ cho phép nhà phát triển chạy các mô hình AI cục bộ trên PC của họ. Công nghệ này hỗ trợ nhiều ngôn ngữ lập trình, bao gồm C#, C++ và Python, và được tối ưu hóa cho nhiều loại phần cứng, bao gồm CPU, NPU và GPU. Đặc biệt dành cho GPU NVIDIA RTX, Windows ML tận dụng NVIDIA TensorRT for RTX Execution Provider để tối đa hóa tiềm năng của các lõi Tensor và các cải tiến về kiến ​​trúc của GPU.

Phó Chủ tịch Microsoft Logan Ayer bày tỏ sự phấn khích về bản phát hành này, nhấn mạnh hiệu suất AI vượt trội mà Windows ML mang lại cho Windows 11 với GPU GeForce RTX và RTX Pro. Công nghệ này được thiết kế để đẩy nhanh quá trình phát triển và triển khai các ứng dụng AI mạnh mẽ ở quy mô lớn.

Windows ML được xây dựng dựa trên ONNX Runtime API và mở rộng khả năng khởi tạo động và quản lý phụ thuộc cho nhiều nền tảng phần cứng khác nhau. Nó đơn giản hóa quy trình cho các nhà phát triển ứng dụng bằng cách tự động tải xuống các nhà cung cấp thực thi cần thiết khi cần, loại bỏ nhu cầu quản lý phụ thuộc thủ công giữa các nhà cung cấp phần cứng khác nhau.

Việc tích hợp Windows ML với nhà cung cấp thực thi TensorRT cho RTX của NVIDIA mang lại nhiều lợi ích, bao gồm suy luận độ trễ thấp và thông lượng tăng đáng kể so với các triển khai trước đây. Nó cũng hỗ trợ nhiều kiến ​​trúc mô hình với khả năng biên dịch tức thời để triển khai hiệu quả đến các thiết bị người dùng cuối. Phiên bản ONNX Runtime 1.23.0, đi kèm với Windows ML, cung cấp API không phụ thuộc vào nhà cung cấp và nhà cung cấp thực thi, giúp đơn giản hóa việc lựa chọn thiết bị và tối đa hóa hiệu suất trên GPU NVIDIA.

Giờ đây, các nhà phát triển có thể biên dịch trước các thời gian chạy mô hình bằng cách sử dụng các tệp ONNX ngữ cảnh EP trong ONNX Runtime, giúp cải thiện thời gian tải trong Windows ML. Việc tối ưu hóa này đặc biệt hiệu quả vì nó giảm thời gian cần thiết cho việc suy luận mô hình. Ngoài ra, API thiết bị ONNX Runtime mới của Windows ML cho phép các nhà phát triển phân bổ các tensor dành riêng cho thiết bị với chi phí truyền dữ liệu tối thiểu, giúp cải thiện hiệu suất và thiết kế mã gọn gàng hơn.

Chia sẻ bài viết này:

Tin tức mới nhất
Exawizards đổi tên nền tảng doanh nghiệp exaBase AI.

Exawizards đổi tên nền tảng doanh nghiệp exaBase AI.

9:00 29/6/26

Exawizards và công ty con Exa Enterprise AI thông báo rằng dịch vụ trí tuệ nhân tạo tạo sinh dành cho doanh nghiệp "exaBase Generative AI" sẽ được đổi tên thành "exaBase AI"

MarkDoor triển khai công nghệ nhận dạng ký tự quang học (OCR) dựa trên AI cho tài liệu hậu cần.

MarkDoor triển khai công nghệ nhận dạng ký tự quang học (OCR) dựa trên AI cho tài liệu hậu cần.

9:00 29/6/26

MarkDoor đã công bố dự án thử nghiệm với Kamiyama Transport về việc tự động hóa số hóa tài liệu bằng công nghệ LLM-OCR của mình cho các hoạt động vận tải và hậu cần.

New Value Frontier ra mắt chương trình chuyển đổi AI.

New Value Frontier ra mắt chương trình chuyển đổi AI.

9:00 29/6/26

New Value Frontier vừa công bố ra mắt "Chương trình Chuyển đổi AI tại chỗ" dành cho các doanh nghiệp kinh doanh dịch vụ cưới

NVIDIA ra mắt mô hình lượng tử hóa Nemotron Ultra NVFP4.

NVIDIA ra mắt mô hình lượng tử hóa Nemotron Ultra NVFP4.

9:00 29/6/26

NVIDIA đã công bố bản cập nhật NVFP4 cho mẫu Nemotron 3 Ultra với 550 tham số, được thiết kế để cải thiện thông lượng suy luận trong khi vẫn duy trì độ chính xác gần với phiên bản BF16 gốc

Copyright © 2024 Generatived - All right Reserved.

Chia sẻ bài viết này:

Chia sẻ bài viết này:

Generatived AI Logo

Generatived là dịch vụ cung cấp thông tin và xu hướng chuyên về Generative AI. Chúng tôi sẽ cố gắng hết sức để cung cấp thông tin về thế giới đang thay đổi nhanh chóng.

  • Facebook
  • X

Hãy theo dõi chúng tôi

Ngôn ngữ

Tin tức mới nhất
Exawizards đổi tên nền tảng doanh nghiệp exaBase AI.

Exawizards đổi tên nền tảng doanh nghiệp exaBase AI.

9:00 29/6/26

Exawizards và công ty con Exa Enterprise AI thông báo rằng dịch vụ trí tuệ nhân tạo tạo sinh dành cho doanh nghiệp "exaBase Generative AI" sẽ được đổi tên thành "exaBase AI"

MarkDoor triển khai công nghệ nhận dạng ký tự quang học (OCR) dựa trên AI cho tài liệu hậu cần.

MarkDoor triển khai công nghệ nhận dạng ký tự quang học (OCR) dựa trên AI cho tài liệu hậu cần.

9:00 29/6/26

MarkDoor đã công bố dự án thử nghiệm với Kamiyama Transport về việc tự động hóa số hóa tài liệu bằng công nghệ LLM-OCR của mình cho các hoạt động vận tải và hậu cần.

New Value Frontier ra mắt chương trình chuyển đổi AI.

New Value Frontier ra mắt chương trình chuyển đổi AI.

9:00 29/6/26

New Value Frontier vừa công bố ra mắt "Chương trình Chuyển đổi AI tại chỗ" dành cho các doanh nghiệp kinh doanh dịch vụ cưới

NVIDIA ra mắt mô hình lượng tử hóa Nemotron Ultra NVFP4.

NVIDIA ra mắt mô hình lượng tử hóa Nemotron Ultra NVFP4.

9:00 29/6/26

NVIDIA đã công bố bản cập nhật NVFP4 cho mẫu Nemotron 3 Ultra với 550 tham số, được thiết kế để cải thiện thông lượng suy luận trong khi vẫn duy trì độ chính xác gần với phiên bản BF16 gốc

bottom of page