Generatived (Beta) | Cung cấp tin tức và xu hướng mới nhất về AI sáng tạo

ABEJA (Minato-ku, Tokyo) thông báo rằng họ đã tiến hành R&D LLM và các công nghệ liên quan như một phần của giai đoạn thứ hai của dự án "GENIAC" của Bộ Kinh tế, Thương mại và Công nghiệp và NEDO, và dự án sẽ hoàn thành vào cuối tháng 4 năm 2025. Công ty đã xây dựng ba LLM thu nhỏ với giới hạn chi phí học tập là 100 triệu yên và tuyên bố rằng Mô hình lý luận 32B và Mô hình 7B đã đạt được mức hiệu suất tiếng Nhật cao nhất thế giới. Điều này đã khắc phục được sự đánh đổi giữa độ chính xác và chi phí, giúp có thể triển khai LLM trong môi trường biên.

Kể từ khi thành lập vào năm 2012, ABEJA đã tiến hành R&D trong các lĩnh vực như học sâu, LLM và điện toán lượng tử, và đã kết hợp những kết quả này vào Nền tảng ABEJA. Bộ Kinh tế, Thương mại và Công nghiệp và NEDO đã khởi động và đang hỗ trợ GENIAC, với mục đích cải thiện năng lực phát triển Generative AI của Nhật Bản. ABEJA đã tham gia GENIAC trong cả giai đoạn đầu tiên và thứ hai, và đang đóng góp vào việc triển khai LLM trên phương diện xã hội.

Trong giai đoạn thứ hai của dự án, ABEJA đã xây dựng các mô hình 32B và 7B nhỏ gọn dựa trên dòng Qwen của Alibaba. Các mô hình này có mức hiệu suất cao nhất thế giới và có thể được sử dụng trong môi trường biên. Ngoài ra, tính hợp lý về mặt kinh tế đã được cải thiện bằng cách giữ chi phí đào tạo ở mức dưới 100 triệu yên. Các mô hình được phát hành đã được đánh giá cao trong bảng xếp hạng Nihon Keizai Shimbun và Bảng xếp hạng Nejumi của WandB3.

Trong tương lai, ABEJA sẽ cài đặt mô hình mà họ đã xây dựng trên Nền tảng ABEJA và hỗ trợ triển khai AI tại các ngân hàng, bệnh viện, nhà máy và các địa điểm khác. Nó có thể được sử dụng trong các môi trường đòi hỏi bảo mật hoặc bị ngắt kết nối Internet và ABEJA sẽ tiếp tục thúc đẩy việc triển khai trong xã hội. Những thành tựu này là kết quả của dự án tài trợ NEDO và ABEJA hướng đến mục tiêu "triển khai một thế giới giàu có hơn".