Generatived (Beta) | Cung cấp tin tức và xu hướng mới nhất về AI sáng tạo
.webp)
Mô hình MoE thành công với Karakuri AWS
Generatived
14:31 21/5/24
Karakuri (Chuo-ku, Tokyo) thông báo rằng họ là công ty đầu tiên trên thế giới học thành công mô hình MoE trên AWS Trainium bằng cách sử dụng "Chương trình hỗ trợ phát triển AWS LLM" của AWS Nhật Bản. Mô hình ngôn ngữ quy mô lớn mới "KARAKURI LM 8x7B Chat v0.1" nhận được điểm cao nhất là mô hình mở trong nước và được phát hành vào ngày 7 tháng 5 năm 2024.
Trong bối cảnh thiếu GPU, một thủ thuật cho thấy những khả năng mới dành cho bộ tăng tốc AI bằng cách sử dụng AWS Trainium. Công ty đã tiến hành nghiên cứu và phát triển với mục đích phát triển AI tổng hợp không dựa vào GPU. AWS Trainium được cho là có thể giảm tới 50% chi phí đào tạo và chi phí phát triển lần này được giữ ở mức khoảng 300.000 yên.
Karakuri được chọn tham gia "Chương trình hỗ trợ phát triển AWS LLM" vào tháng 9 năm 2023 và bắt đầu phát triển "KARAKURI LM 70B Chat v0.1" với 70 tỷ thông số. Mẫu mới "KARAKURI LM 8x7B Chat v0.1" sử dụng phương pháp MoE cũng nhận được nhiều đánh giá cao.
Chi phí phát triển cho "KARAKURI LM 8x7B Chat v0.1" là khoảng 300.000 yên và thời gian học là 12 giờ nên rất hiệu quả. Bằng cách hiện thực hóa sự phát triển với chi phí thấp này, dự kiến LLM tùy chỉnh sẽ được sử dụng trong ngành tài chính và y tế.
Chia sẻ bài viết này:
Tin tức mới nhất
NVIDIA mở rộng chiến lược đầu tư cơ sở hạ tầng AI tại Mỹ.
9:00 3/7/26
NVIDIA vừa công bố chiến lược đầu tư mở rộng tại Mỹ nhằm tăng cường cơ sở hạ tầng AI, bao gồm sản xuất chất bán dẫn, nhà máy AI, hệ thống năng lượng và chuỗi cung ứng.
VisasQ bổ sung tính năng soạn thảo hồ sơ xin việc bằng AI.
9:00 2/7/26
VisasQ đã bổ sung trợ lý đăng tuyển dụng dựa trên trí tuệ nhân tạo (AI) vào nền tảng tuyển dụng trực tiếp của mình, VisasQ Direct.
Shiftplus ra mắt tùy chọn AI dành cho chính phủ iJAMP RAG
9:00 2/7/26
Shiftplus đã giới thiệu iJAMP RAG, một tùy chọn mới cho nền tảng AI zevo dành cho Chính quyền địa phương, được phát triển cùng với Jiji Press.
%20(1).webp)
Copyright © 2024 Generatived - All right Reserved.
Chia sẻ bài viết này:
Chia sẻ bài viết này:
Danh mục
Tin tức
AI và luật/hệ thống/kinh tế/xã hội
Hãy theo dõi chúng tôi
Ngôn ngữ
Generatived là dịch vụ cung cấp thông tin và xu hướng chuyên về Generative AI. Chúng tôi sẽ cố gắng hết sức để cung cấp thông tin về thế giới đang thay đổi nhanh chóng.
Generatived là dịch vụ cung cấp thông tin và xu hướng chuyên về Generative AI. Chúng tôi sẽ cố gắng hết sức để cung cấp th ông tin về thế giới đang thay đổi nhanh chóng.
Hãy theo dõi chúng tôi
Ngôn ngữ
Tin tức mới nhất
NVIDIA mở rộng chiến lược đầu tư cơ sở hạ tầng AI tại Mỹ.
9:00 3/7/26
NVIDIA vừa công bố chiến lược đầu tư mở rộng tại Mỹ nhằm tăng cường cơ sở hạ tầng AI, bao gồm sản xuất chất bán dẫn, nhà máy AI, hệ thống năng lượng và chuỗi cung ứng.
VisasQ bổ sung tính năng soạn thảo hồ sơ xin vi ệc bằng AI.
9:00 2/7/26
VisasQ đã bổ sung trợ lý đăng tuyển dụng dựa trên trí tuệ nhân tạo (AI) vào nền tảng tuyển dụng trực tiếp của mình, VisasQ Direct.
Shiftplus ra mắt tùy chọn AI dành cho chính phủ iJAMP RAG
9:00 2/7/26
Shiftplus đã giới thiệu iJAMP RAG, một tùy chọn mới cho nền tảng AI zevo dành cho Chính quyền địa phương, được phát triển cùng với Jiji Press.