top of page

Generatived (Beta) | Cung cấp tin tức và xu hướng mới nhất về AI sáng tạo

logo.png

NVIDIA công bố khung SMART cho suy luận AI

Generatived

9:00 11/9/25

Suy luận đã trở thành một khía cạnh then chốt của trí tuệ nhân tạo (AI), với các mô hình hiện đại đang phát triển để xử lý các tác vụ phức tạp như phát triển phần mềm và tạo video. Các hệ thống tiên tiến này có khả năng suy luận đa giai đoạn, duy trì bộ nhớ liên tục và hiểu được bối cảnh dài hạn. Tuy nhiên, những khả năng này đặt ra những thách thức mới cho cơ sở hạ tầng điện toán, buộc chúng ta phải đánh giá lại cách thức mở rộng và tối ưu hóa suy luận.

Sự phức tạp ngày càng tăng của khối lượng công việc AI, đặc biệt là trong phát triển phần mềm, đòi hỏi các hệ thống phải quản lý toàn bộ cơ sở mã, theo dõi sự phụ thuộc giữa các tệp và hiểu các cấu trúc cấp kho lưu trữ. Điều này đã biến các trợ lý mã hóa thành những người cộng tác thông minh hơn. Tương tự, các ứng dụng video và nghiên cứu dạng dài đòi hỏi các hệ thống AI phải duy trì tính nhất quán và bộ nhớ trên các chuỗi dữ liệu khổng lồ, vượt quá giới hạn của cơ sở hạ tầng hiện có.

NVIDIA đã giải quyết những thách thức này với khuôn khổ SMART, nhằm mục đích tối ưu hóa suy luận bằng cách tập trung vào quy mô, hiệu suất, kiến ​​trúc, ROI và tích hợp hệ sinh thái. Khuôn khổ này thúc đẩy cơ sở hạ tầng phân tán toàn diện, cho phép phân bổ hiệu quả tài nguyên tính toán và bộ nhớ. Bộ sản phẩm của NVIDIA, bao gồm GPU Blackwell và GPU GB200 NVL72, cùng các giải pháp phần mềm như TensorRT-LLM và Dynamo, đang cải thiện hiệu suất suy luận trong toàn ngành AI.

Công ty cũng đã công bố NVIDIA Rubin CPX, một GPU được thiết kế đặc biệt cho khối lượng công việc AI ngữ cảnh dài. Rubin CPX hướng đến việc mang lại hiệu quả và ROI cao hơn bằng cách đáp ứng nhu cầu của các tác vụ phức tạp này. Sự phát triển mới này đánh dấu một bước tiến mới trong quá trình phát triển cơ sở hạ tầng suy luận phân tán, tối ưu hóa việc sử dụng tài nguyên và cải thiện hiệu suất bằng cách tách biệt các giai đoạn xử lý.

Chia sẻ bài viết này:

Tin tức mới nhất
NVIDIA ra mắt bộ công cụ tự động hóa tài liệu mô hình AI.

NVIDIA ra mắt bộ công cụ tự động hóa tài liệu mô hình AI.

9:00 2/6/26

NVIDIA, có trụ sở chính tại Santa Clara, California, đã giới thiệu Bộ công cụ Model Card Generator (MCG)

Braintrust đẩy nhanh quá trình phát triển sản phẩm với Codex.

Braintrust đẩy nhanh quá trình phát triển sản phẩm với Codex.

9:00 2/6/26

Braintrust báo cáo rằng các nhóm kỹ thuật của họ đang sử dụng Codex với GPT-5.5 để tăng tốc quá trình phát triển phần mềm và thử nghiệm tính năng theo yêu cầu của khách hàng.

Bệnh viện Nhi Boston mở rộng ứng dụng trí tuệ nhân tạo trong toàn bộ hoạt động chăm sóc sức khỏe.

Bệnh viện Nhi Boston mở rộng ứng dụng trí tuệ nhân tạo trong toàn bộ hoạt động chăm sóc sức khỏe.

9:00 2/6/26

Bệnh viện Nhi Boston báo cáo rằng họ đã tích hợp trí tuệ nhân tạo (AI) vào các chức năng lâm sàng, nghiên cứu và hành chính để cải thiện việc cung cấp dịch vụ chăm sóc và hiệu quả hoạt động.

Cổng thông tin Google AI Edge bổ sung tính năng so sánh hiệu năng LLM.

Cổng thông tin Google AI Edge bổ sung tính năng so sánh hiệu năng LLM.

9:00 2/6/26

Google vừa công bố các tính năng mới cho Google AI Edge Portal, bổ sung các công cụ đánh giá hiệu năng và gỡ lỗi LLM trên thiết bị nhằm giúp các nhà phát triển tối ưu hóa

Copyright © 2024 Generatived - All right Reserved.

Chia sẻ bài viết này:

Chia sẻ bài viết này:

Generatived AI Logo

Generatived là dịch vụ cung cấp thông tin và xu hướng chuyên về Generative AI. Chúng tôi sẽ cố gắng hết sức để cung cấp thông tin về thế giới đang thay đổi nhanh chóng.

  • Facebook
  • X

Hãy theo dõi chúng tôi

Ngôn ngữ

Tin tức mới nhất
NVIDIA ra mắt bộ công cụ tự động hóa tài liệu mô hình AI.

NVIDIA ra mắt bộ công cụ tự động hóa tài liệu mô hình AI.

9:00 2/6/26

NVIDIA, có trụ sở chính tại Santa Clara, California, đã giới thiệu Bộ công cụ Model Card Generator (MCG)

Braintrust đẩy nhanh quá trình phát triển sản phẩm với Codex.

Braintrust đẩy nhanh quá trình phát triển sản phẩm với Codex.

9:00 2/6/26

Braintrust báo cáo rằng các nhóm kỹ thuật của họ đang sử dụng Codex với GPT-5.5 để tăng tốc quá trình phát triển phần mềm và thử nghiệm tính năng theo yêu cầu của khách hàng.

Bệnh viện Nhi Boston mở rộng ứng dụng trí tuệ nhân tạo trong toàn bộ hoạt động chăm sóc sức khỏe.

Bệnh viện Nhi Boston mở rộng ứng dụng trí tuệ nhân tạo trong toàn bộ hoạt động chăm sóc sức khỏe.

9:00 2/6/26

Bệnh viện Nhi Boston báo cáo rằng họ đã tích hợp trí tuệ nhân tạo (AI) vào các chức năng lâm sàng, nghiên cứu và hành chính để cải thiện việc cung cấp dịch vụ chăm sóc và hiệu quả hoạt động.

Cổng thông tin Google AI Edge bổ sung tính năng so sánh hiệu năng LLM.

Cổng thông tin Google AI Edge bổ sung tính năng so sánh hiệu năng LLM.

9:00 2/6/26

Google vừa công bố các tính năng mới cho Google AI Edge Portal, bổ sung các công cụ đánh giá hiệu năng và gỡ lỗi LLM trên thiết bị nhằm giúp các nhà phát triển tối ưu hóa

bottom of page