top of page

Generatived (Beta) | Cung cấp tin tức và xu hướng mới nhất về AI sáng tạo

logo.png

Microsoft công bố Windows ML dành cho phát triển AI

Generatived

9:00 25/9/25

Microsoft đã công bố Windows ML dành cho nhà phát triển, một công cụ cho phép nhà phát triển chạy các mô hình AI cục bộ trên PC của họ. Công nghệ này hỗ trợ nhiều ngôn ngữ lập trình, bao gồm C#, C++ và Python, và được tối ưu hóa cho nhiều loại phần cứng, bao gồm CPU, NPU và GPU. Đặc biệt dành cho GPU NVIDIA RTX, Windows ML tận dụng NVIDIA TensorRT for RTX Execution Provider để tối đa hóa tiềm năng của các lõi Tensor và các cải tiến về kiến ​​trúc của GPU.

Phó Chủ tịch Microsoft Logan Ayer bày tỏ sự phấn khích về bản phát hành này, nhấn mạnh hiệu suất AI vượt trội mà Windows ML mang lại cho Windows 11 với GPU GeForce RTX và RTX Pro. Công nghệ này được thiết kế để đẩy nhanh quá trình phát triển và triển khai các ứng dụng AI mạnh mẽ ở quy mô lớn.

Windows ML được xây dựng dựa trên ONNX Runtime API và mở rộng khả năng khởi tạo động và quản lý phụ thuộc cho nhiều nền tảng phần cứng khác nhau. Nó đơn giản hóa quy trình cho các nhà phát triển ứng dụng bằng cách tự động tải xuống các nhà cung cấp thực thi cần thiết khi cần, loại bỏ nhu cầu quản lý phụ thuộc thủ công giữa các nhà cung cấp phần cứng khác nhau.

Việc tích hợp Windows ML với nhà cung cấp thực thi TensorRT cho RTX của NVIDIA mang lại nhiều lợi ích, bao gồm suy luận độ trễ thấp và thông lượng tăng đáng kể so với các triển khai trước đây. Nó cũng hỗ trợ nhiều kiến ​​trúc mô hình với khả năng biên dịch tức thời để triển khai hiệu quả đến các thiết bị người dùng cuối. Phiên bản ONNX Runtime 1.23.0, đi kèm với Windows ML, cung cấp API không phụ thuộc vào nhà cung cấp và nhà cung cấp thực thi, giúp đơn giản hóa việc lựa chọn thiết bị và tối đa hóa hiệu suất trên GPU NVIDIA.

Giờ đây, các nhà phát triển có thể biên dịch trước các thời gian chạy mô hình bằng cách sử dụng các tệp ONNX ngữ cảnh EP trong ONNX Runtime, giúp cải thiện thời gian tải trong Windows ML. Việc tối ưu hóa này đặc biệt hiệu quả vì nó giảm thời gian cần thiết cho việc suy luận mô hình. Ngoài ra, API thiết bị ONNX Runtime mới của Windows ML cho phép các nhà phát triển phân bổ các tensor dành riêng cho thiết bị với chi phí truyền dữ liệu tối thiểu, giúp cải thiện hiệu suất và thiết kế mã gọn gàng hơn.

Chia sẻ bài viết này:

Tin tức mới nhất
NVIDIA nhấn mạnh tầm quan trọng của việc chuyển tải dữ liệu JAX Host cho chương trình đào tạo LLM.

NVIDIA nhấn mạnh tầm quan trọng của việc chuyển tải dữ liệu JAX Host cho chương trình đào tạo LLM.

9:00 14/7/26

NVIDIA đã trình bày cách thức giảm tải trên máy chủ (host offloading) trong JAX có thể giảm áp lực lên bộ nhớ băng thông cao của GPU trong quá trình huấn luyện mô hình ngôn ngữ quy mô lớn.

Deutsche Telekom mở rộng ứng dụng trí tuệ nhân tạo (AI) trong hoạt động viễn thông.

Deutsche Telekom mở rộng ứng dụng trí tuệ nhân tạo (AI) trong hoạt động viễn thông.

9:00 14/7/26

Deutsche Telekom đã vạch ra chiến lược trở thành nhà cung cấp dịch vụ viễn thông ứng dụng trí tuệ nhân tạo (AI) bằng cách tích hợp AI tạo sinh vào dịch vụ khách hàng

Meshy tổ chức sự kiện hội thảo về Trí tuệ nhân tạo 3D tại Nhật Bản.

Meshy tổ chức sự kiện hội thảo về Trí tuệ nhân tạo 3D tại Nhật Bản.

9:00 14/7/26

Meshy thông báo sẽ tổ chức hội thảo thực hành chính thức "Meshy 3D Creative Hub" vào ngày 25 tháng 7 tại Tokyo, mang đến cho các nhà sáng tạo

AgriweB cập nhật dịch vụ Trợ lý Trí tuệ Nhân tạo cho Cây trồng

AgriweB cập nhật dịch vụ Trợ lý Trí tuệ Nhân tạo cho Cây trồng

9:00 14/7/26

AgriweB vừa công bố phiên bản nâng cấp của trợ lý quản lý cây trồng dựa trên trí tuệ nhân tạo (AI), bổ sung các tính năng được thiết kế để giúp nông dân xác định

Copyright © 2024 Generatived - All right Reserved.

Chia sẻ bài viết này:

Chia sẻ bài viết này:

Generatived AI Logo

Generatived là dịch vụ cung cấp thông tin và xu hướng chuyên về Generative AI. Chúng tôi sẽ cố gắng hết sức để cung cấp thông tin về thế giới đang thay đổi nhanh chóng.

  • Facebook
  • X

Hãy theo dõi chúng tôi

Ngôn ngữ

Tin tức mới nhất
NVIDIA nhấn mạnh tầm quan trọng của việc chuyển tải dữ liệu JAX Host cho chương trình đào tạo LLM.

NVIDIA nhấn mạnh tầm quan trọng của việc chuyển tải dữ liệu JAX Host cho chương trình đào tạo LLM.

9:00 14/7/26

NVIDIA đã trình bày cách thức giảm tải trên máy chủ (host offloading) trong JAX có thể giảm áp lực lên bộ nhớ băng thông cao của GPU trong quá trình huấn luyện mô hình ngôn ngữ quy mô lớn.

Deutsche Telekom mở rộng ứng dụng trí tuệ nhân tạo (AI) trong hoạt động viễn thông.

Deutsche Telekom mở rộng ứng dụng trí tuệ nhân tạo (AI) trong hoạt động viễn thông.

9:00 14/7/26

Deutsche Telekom đã vạch ra chiến lược trở thành nhà cung cấp dịch vụ viễn thông ứng dụng trí tuệ nhân tạo (AI) bằng cách tích hợp AI tạo sinh vào dịch vụ khách hàng

Meshy tổ chức sự kiện hội thảo về Trí tuệ nhân tạo 3D tại Nhật Bản.

Meshy tổ chức sự kiện hội thảo về Trí tuệ nhân tạo 3D tại Nhật Bản.

9:00 14/7/26

Meshy thông báo sẽ tổ chức hội thảo thực hành chính thức "Meshy 3D Creative Hub" vào ngày 25 tháng 7 tại Tokyo, mang đến cho các nhà sáng tạo

AgriweB cập nhật dịch vụ Trợ lý Trí tuệ Nhân tạo cho Cây trồng

AgriweB cập nhật dịch vụ Trợ lý Trí tuệ Nhân tạo cho Cây trồng

9:00 14/7/26

AgriweB vừa công bố phiên bản nâng cấp của trợ lý quản lý cây trồng dựa trên trí tuệ nhân tạo (AI), bổ sung các tính năng được thiết kế để giúp nông dân xác định

bottom of page