Generatived (Beta) | Cung cấp tin tức và xu hướng mới nhất về AI sáng tạo
%20(1).webp)
NVIDIA tăng tốc DiffusionGemma trên các nền tảng RTX
Generatived
9:00 19/6/26
NVIDIA đã công bố các tối ưu hóa cho mô hình DiffusionGemma thử nghiệm của Google DeepMind, cho phép triển khai nhanh hơn trên các GPU RTX, hệ thống RTX PRO và nền tảng DGX Spark.
Không giống như các mô hình ngôn ngữ truyền thống tạo ra văn bản theo trình tự, DiffusionGemma tạo ra tối đa 256 token song song. Mô hình này dựa trên kiến trúc Gemma 4 và sử dụng thiết kế Mixture of Experts 26B với 3,8B tham số hoạt động trong quá trình suy luận.
Theo NVIDIA, kiến trúc này mang lại khả năng tạo văn bản nhanh hơn gấp bốn lần trong môi trường người dùng đơn lẻ. Hiệu suất đạt 1.000 token mỗi giây trên GPU H100 và lên đến 2.000 token mỗi giây trên hệ thống DGX Station.
Mô hình mã nguồn mở này có sẵn theo giấy phép Apache 2.0 và hỗ trợ triển khai thông qua Hugging Face Transformers, vLLM, Unsloth và NVIDIA NeMo. Công ty cho biết nền tảng này phù hợp với các trợ lý AI cục bộ, quy trình làm việc dựa trên tác nhân và các ứng dụng tạo văn bản có độ trễ thấp.
Chia sẻ bài viết này:
Tin tức mới nhất
NVIDIAがAI基盤の更新発表
7:00 28/9/26
NVIDIA（米国カリフォルニア州）は、自律型AIエージェントのアクセス制御を担うオープンソース実行基盤『OpenShell 0.1.0』を発表した。
Copyright © 2024 Generatived - All right Reserved.
Chia sẻ bài viết này:
Chia sẻ bài viết này:
Danh mục
Tin tức
AI và luật/hệ thống/kinh tế/xã hội
Hãy theo dõi chúng tôi
Ngôn ngữ
Generatived là dịch vụ cung cấp thông tin và xu hướng chuyên về Generative AI. Chúng tôi sẽ cố gắng hết sức để cung cấp thông tin về thế giới đang thay đổi nhanh chóng.
Generatived là dịch vụ cung cấp thông tin và xu hướng chuyên về Generative AI. Chúng tôi sẽ cố gắng hết sức để cung cấp thông tin về thế gi ới đang thay đổi nhanh chóng.
Hãy theo dõi chúng tôi
Ngôn ngữ
Tin tức mới nhất
NVIDIAがAI基盤の更新発表
7:00 28/9/26
NVIDIA（米国カリフォルニア州）は、自律型AIエージェントのアクセス制御を担うオープンソース実行基盤『OpenShell 0.1.0』を発表した。