Generatived (Beta) | Cung cấp tin tức và xu hướng mới nhất về AI sáng tạo

Rakuten (Tokyo) đã công bố mô hình ngôn ngữ tiếng Nhật quy mô lớn mới "Rakuten AI 2.0" và mô hình ngôn ngữ quy mô nhỏ "Rakuten AI 2.0 mini". Chúng được phát triển cho các chuyên gia và sẽ được cung cấp cho cộng đồng nguồn mở vào mùa xuân tới. LLM mới dựa trên "Rakuten AI 7B" và bao gồm tám mô hình con tham số 7 tỷ. SLM cho phép tạo văn bản hiệu suất cao với 1,5 tỷ tham số.

"Rakuten AI 2.0" sử dụng kiến ​​trúc MoE để tối ưu hóa hiệu quả và hiệu suất tính toán. Nó đạt được hiệu suất tương đương với các mô hình mật độ cao đồng thời giảm lượng tính toán tiêu thụ xuống còn 1/4 so với các mô hình thông thường. Mặt khác, "Rakuten AI 2.0 mini" có thể được cài đặt trên thiết bị đầu cuối di động và có khả năng bảo vệ quyền riêng tư tuyệt vời, độ trễ thấp và tiết kiệm chi phí.

Ting Tsai CAIDO của Rakuten tin rằng AI là giải pháp giúp tăng tính sáng tạo và hiệu quả, đồng thời nhận xét rằng "Rakuten AI 2.0" và "Rakuten AI 2.0 mini" sẽ hữu ích trong việc hỗ trợ các chuyên gia. GM Lee Xiong cũng cho biết LLM mới sẽ giúp giảm chi phí và xử lý hiệu suất cao, đồng thời SLM sẽ cách mạng hóa các mô hình dựa trên biên.

Rakuten sẽ tiếp tục mô hình LLM tự phát triển của mình với mục đích đóng góp cho cộng đồng nguồn mở và phát triển LLM Nhật Bản. Hơn nữa, với chủ đề “AI-nization”, chúng tôi sẽ thúc đẩy việc sử dụng AI trong mọi khía cạnh kinh doanh và hướng tới tạo ra giá trị mới.