Generatived (Beta) | Cung cấp tin tức và xu hướng mới nhất về AI sáng tạo
SemiAnalysis công bố InferenceMAX, đưa Excel vào GPU NVIDIA
Generatived
9:00 14/10/25
SemiAnalysis đã công bố InferenceMAX™ v1, một sáng kiến mã nguồn mở nhằm đánh giá hiệu suất phần cứng suy luận. Những phát hiện của sáng kiến này chứng minh rằng GPU NVIDIA mang lại hiệu suất tốt nhất trên nhiều khối lượng công việc khác nhau. Đặc biệt, dòng Blackwell của NVIDIA cho thấy những cải tiến hiệu suất đáng kể so với thế hệ Hopper trước đó, cho thấy tiềm năng doanh thu đáng kể.
Nền tảng InferenceMAX v1 có các bài kiểm tra tự động hàng ngày bao gồm nhiều khuôn khổ và cấu hình suy luận. Phương pháp này đảm bảo các điểm chuẩn phản ánh chính xác các tình huống triển khai AI trong thế giới thực. Các bài kiểm tra toàn diện bao gồm nhiều mô hình và độ dài chuỗi, cung cấp xác thực chi tiết về hiệu suất phần cứng suy luận.
Kiến trúc Blackwell của NVIDIA đã chứng minh hiệu quả và hiệu quả chi phí vượt trội trong bài kiểm tra InferenceMAX v1. Với lõi Tensor tiên tiến và băng thông NVLink cao, dòng Blackwell đã chứng minh những cải tiến ấn tượng về hiệu suất tính toán trên mỗi watt và băng thông bộ nhớ. Những cải tiến này đã cải thiện hiệu suất năng lượng và giảm chi phí trên mỗi triệu token, khẳng định vị thế dẫn đầu của nền tảng NVIDIA trong việc triển khai AI quy mô lớn.
Hiệu suất phần cứng của NVIDIA đang không ngừng được cải thiện thông qua việc tối ưu hóa phần mềm liên tục. Đội ngũ kỹ sư của NVIDIA đã và đang nỗ lực cải tiến ngăn xếp TensorRT-LLM, giúp tăng đáng kể thông lượng của LLM nguồn mở. Những tiến bộ này, cùng với bản chất nguồn mở của InferenceMAX v1, cho phép cộng đồng AI xác thực và tận dụng vị thế dẫn đầu về hiệu suất của NVIDIA trong nhiều tình huống suy luận AI.
Chia sẻ bài viết này:
Tin tức mới nhất
AItegrity xây dựng hệ thống AI để lên lịch phỏng vấn.
9:00 20/7/26
AItegrity đã phát triển một nguyên mẫu hệ thống lập lịch phỏng vấn tự động bằng trí tuệ nhân tạo để hỗ trợ các nhóm nhân sự của một công ty xây dựng nhà ở lớn trong việc thực hiện 300
Multiverse Computing huy động được 570 triệu đô la trong vòng gọi vốn Series C.
9:00 20/7/26
Công ty Multiverse Computing (San Sebastian) đã huy động được 570 triệu đô la trong vòng gọi vốn Series C với định giá trước đầu tư là 1,7 tỷ đô la, tăng gấp năm lần so với vòng Series B.
NVIDIA chia sẻ hướng dẫn thiết kế phần cứng cho LLM.
9:00 14/7/26
NVIDIA đã phát hành một hướng dẫn thiết kế phác thảo các phương pháp thực hành nhận biết phần cứng cho các mô hình ngôn ngữ lớn.
Copyright © 2024 Generatived - All right Reserved.
Chia sẻ bài viết này:
Chia sẻ bài viết này:
Danh mục
Tin tức
AI và luật/hệ thống/kinh tế/xã hội
Hãy theo dõi chúng tôi
Ngôn ngữ
Generatived là dịch vụ cung cấp thông tin và xu hướng chuyên về Generative AI. Chúng tôi sẽ cố gắng hết sức để cung cấp thông tin về thế giới đang thay đổi nhanh chóng.
Generatived là dịch vụ cung cấp thông tin và xu hướng chuyên về Generative AI. Chúng tôi sẽ cố gắng hết sức để cung cấp th ông tin về thế giới đang thay đổi nhanh chóng.
Hãy theo dõi chúng tôi
Ngôn ngữ
Tin tức mới nhất
AItegrity xây dựng hệ thống AI để lên lịch phỏng vấn.
9:00 20/7/26
AItegrity đã phát triển một nguyên mẫu hệ thống lập lịch phỏng vấn tự động bằng trí tuệ nhân tạo để hỗ trợ các nhóm nhân sự của một công ty xây dựng nhà ở lớn trong việc thực hiện 300
Multiverse Computing huy đ ộng được 570 triệu đô la trong vòng gọi vốn Series C.
9:00 20/7/26
Công ty Multiverse Computing (San Sebastian) đã huy động được 570 triệu đô la trong vòng gọi vốn Series C với định giá trước đầu tư là 1,7 tỷ đô la, tăng gấp năm lần so với vòng Series B.
NVIDIA chia sẻ hướng dẫn thiết kế phần cứng cho LLM.
9:00 14/7/26
NVIDIA đã phát hành một hướng dẫn thiết kế phác thảo các phương pháp thực hành nhận biết phần cứng cho các mô hình ngôn ngữ lớn.