Generatived (Beta) | Cung cấp tin tức và xu hướng mới nhất về AI sáng tạo

Rakuten (Tokyo) đã công bố mẫu "Rakuten AI 7B" có trụ sở tại Nhật Bản được phát triển dựa trên "Mistral-7B-v0.1" của Mistral AI của Pháp. Mô hình có 7 tỷ tham số và được thu nhỏ và huấn luyện trước trên cụm GPU do Rakuten thiết kế. Ngoài ra, còn cung cấp mô hình trò chuyện "Rakuten AI 7B Chat", chuyên tạo các câu hội thoại.

LLM của Rakuten đạt được hiệu suất cao thông qua việc học trước bằng cách sử dụng dữ liệu chất lượng cao. Nó sử dụng một máy phân tích hình thái độc đáo để nâng cao hiệu quả trong xử lý ngôn ngữ tiếng Nhật. Hơn nữa, việc đánh giá bằng công cụ đánh giá mô hình ngôn ngữ "LM Evaluation Harness" đã thể hiện hiệu suất cao trong LLM tiếng Nhật và tiếng Anh.

Tất cả ba mô hình đều được cung cấp theo giấy phép Apache 2.0 và có thể được tải xuống từ kho lưu trữ "Ôm mặt" của Rakuten. Nó có thể được sử dụng thương mại cho nhiều nhiệm vụ tạo văn bản khác nhau, chẳng hạn như tóm tắt văn bản và trả lời câu hỏi, đồng thời cũng có thể được sử dụng làm cơ sở cho các mô hình khác.

CDO Ting Tsai của Rakuten bày tỏ ý định chia sẻ kiến ​​thức thu được thông qua việc phát triển LLM với cộng đồng nguồn mở và đóng góp vào sự phát triển LLM của Nhật Bản. Rakuten đặt mục tiêu thúc đẩy việc sử dụng công nghệ AI và tạo ra giá trị mới trên toàn thế giới.