Generatived (Beta) | Cung cấp tin tức và xu hướng mới nhất về AI sáng tạo

Rakuten (Tokyo) đã phát hành một mô hình ngôn ngữ quy mô lớn mới của Nhật Bản, "Rakuten AI 2.0" và một mô hình ngôn ngữ quy mô nhỏ, "Rakuten AI 2.0 mini". Các mô hình này sử dụng kiến ​​trúc Mixture of Experts và được cung cấp theo giấy phép Apache 2.0. Chúng có thể được tải xuống từ kho lưu trữ "Hugging Face" của Rakuten.

"Rakuten AI 2.0" đã được tinh chỉnh bằng SimPO để đạt được sự tối ưu hóa gần hơn với sở thích của con người. Trong các đánh giá sử dụng phiên bản tiếng Nhật của MT-Bench, nó cho thấy hiệu suất cao hơn so với các mô hình khác có cùng kích thước. "Rakuten AI 2.0 mini" cũng cho thấy hiệu suất tốt nhất trong số các mô hình có cùng kích thước.

Ting Tsai CAIDO của Rakuten bình luận rằng mô hình AI mới sẽ giúp các công ty nhận ra giá trị nhanh chóng và đẩy nhanh quá trình phát triển AI tại Nhật Bản. Rakuten hướng đến mục tiêu thúc đẩy việc tạo ra các dịch vụ và sản phẩm mới thông qua việc sử dụng AI và xây dựng cộng đồng.

"Rakuten AI 2.0" của Rakuten bao gồm tám mô hình con với 7 tỷ tham số, được đào tạo bằng dữ liệu tiếng Nhật và tiếng Anh chất lượng cao. Trong khi đó, "Rakuten AI 2.0 mini" được đào tạo bằng 1,5 tỷ tham số thông qua quy trình lọc dữ liệu và chú thích nội bộ. Rakuten sẽ tiếp tục thúc đẩy AI-nization với mục tiêu phát triển công nghệ AI.