top of page

Generatived (Beta) | Cung cấp tin tức và xu hướng mới nhất về AI sáng tạo

logo.png

Viettel Solutions tăng cường AI cho người Việt Nam

Generatived

24/11/20 4:30

Viettel Solutions đã có những đóng góp đáng kể vào việc nâng cao khả năng AI cho tiếng Việt với NVIDIA NeMo Curator. Công cụ này đã giúp tạo ra các tập dữ liệu chất lượng cao để đào tạo Llama 3 cho ViettelSolution 8B, một mô hình ngôn ngữ tiên tiến. Bằng cách biên tập một tập dữ liệu mở rộng, Viettel Solutions đã cải thiện độ chính xác của mô hình, giảm thời gian đào tạo và giảm đáng kể kích thước của tập dữ liệu.

Quá trình bắt đầu bằng việc thu thập nhiều dữ liệu văn bản tiếng Việt từ nhiều nguồn, bao gồm dữ liệu thu thập trên web và Wikipedia. Sau đó, dữ liệu này được chuẩn hóa và định dạng để đảm bảo tính nhất quán. Viettel Solutions đã tinh chỉnh tập dữ liệu bằng nhiều kỹ thuật biên tập dữ liệu khác nhau, bao gồm định dạng lại Unicode và loại bỏ trùng lặp chính xác. Các bước này rất quan trọng để đảm bảo tính duy nhất và chất lượng của dữ liệu đào tạo.

Để cải thiện hơn nữa chất lượng của tập dữ liệu, các phương pháp lọc dựa trên phương pháp tìm kiếm và phân loại cũng đã được áp dụng. Các bộ lọc này giúp loại bỏ nội dung chất lượng thấp và tinh chỉnh dữ liệu dựa trên các mẫu phức tạp có thể bị bỏ qua bởi các quy tắc đơn giản. Kết quả là một tập dữ liệu có độ dài văn bản và số lượng mã thông báo phân bổ đều hơn, với việc giảm đáng kể các giá trị ngoại lai và dữ liệu nhiễu.

Những nỗ lực của Viettel Solutions không chỉ cải thiện hiệu suất mô hình ngôn ngữ mà còn duy trì tính đa dạng của tập dữ liệu, điều này rất cần thiết để xây dựng các mô hình ngôn ngữ đa năng, có mục đích chung. Sự hợp tác của công ty với NVIDIA và việc sử dụng NeMo Curator chứng minh tiềm năng của AI trong việc đáp ứng nhu cầu ngôn ngữ cụ thể của các quốc gia không nói tiếng Anh và đảm bảo trải nghiệm khách hàng toàn diện và có tác động hơn.

Chia sẻ bài viết này:

Tin tức mới nhất
AI được phát triển chung bởi Phòng thí nghiệm Matsuo và Panasonic

AI được phát triển chung bởi Phòng thí nghiệm Matsuo và Panasonic

24/12/2 4:30

Phòng thí nghiệm Matsuo (Bunkyo-ku, Tokyo) và Panasonic HD (Kadoma-shi, Osaka) đã phát triển một AI có thể học từ các bài viết và hồ sơ bài giảng của Konosuke Matsushita.

Casanare Osaka giành chiến thắng và tiến tới Giải vô địch thế giới

Casanare Osaka giành chiến thắng và tiến tới Giải vô địch thế giới

24/12/2 4:30

Casanare (Shibuya-ku, Tokyo) đã giành chiến thắng tại cuộc thi "GET IN THE RING OSAKA 2024" được tổ chức tại Trung tâm hội nghị Grand Front North Building ở thành phố Osaka vào ngày 26 tháng 11 năm 2024.

Phát hành tính năng sự kiện mới của BreakAI

Phát hành tính năng sự kiện mới của BreakAI

24/12/2 4:30

Herit, do BreakAI (Chiyoda-ku, Tokyo) điều hành, đã phát hành chức năng lưu trữ sự kiện mới.

Phiên bản beta Arugamage Ayuru Diagnostic GPT được công bố

Phiên bản beta Arugamage Ayuru Diagnostic GPT được công bố

24/12/2 4:30

Arugamage (Miyada-mura, Kamiina-gun, Tỉnh Nagano) sẽ phát hành phiên bản beta của chatbot chẩn đoán thể trạng Ayurveda "Ayur Diagnosis GPT" vào ngày 10 tháng 12.

Copyright © 2024 Generatived - All right Reserved.

Chia sẻ bài viết này:

Chia sẻ bài viết này:

Generatived AI Logo

Generatived là dịch vụ cung cấp thông tin và xu hướng chuyên về Generative AI. Chúng tôi sẽ cố gắng hết sức để cung cấp thông tin về thế giới đang thay đổi nhanh chóng.

  • Facebook
  • X

Hãy theo dõi chúng tôi

Ngôn ngữ

Tin tức mới nhất
AI được phát triển chung bởi Phòng thí nghiệm Matsuo và Panasonic

AI được phát triển chung bởi Phòng thí nghiệm Matsuo và Panasonic

24/12/2 4:30

Phòng thí nghiệm Matsuo (Bunkyo-ku, Tokyo) và Panasonic HD (Kadoma-shi, Osaka) đã phát triển một AI có thể học từ các bài viết và hồ sơ bài giảng của Konosuke Matsushita.

Casanare Osaka giành chiến thắng và tiến tới Giải vô địch thế giới

Casanare Osaka giành chiến thắng và tiến tới Giải vô địch thế giới

24/12/2 4:30

Casanare (Shibuya-ku, Tokyo) đã giành chiến thắng tại cuộc thi "GET IN THE RING OSAKA 2024" được tổ chức tại Trung tâm hội nghị Grand Front North Building ở thành phố Osaka vào ngày 26 tháng 11 năm 2024.

Phát hành tính năng sự kiện mới của BreakAI

Phát hành tính năng sự kiện mới của BreakAI

24/12/2 4:30

Herit, do BreakAI (Chiyoda-ku, Tokyo) điều hành, đã phát hành chức năng lưu trữ sự kiện mới.

Phiên bản beta Arugamage Ayuru Diagnostic GPT được công bố

Phiên bản beta Arugamage Ayuru Diagnostic GPT được công bố

24/12/2 4:30

Arugamage (Miyada-mura, Kamiina-gun, Tỉnh Nagano) sẽ phát hành phiên bản beta của chatbot chẩn đoán thể trạng Ayurveda "Ayur Diagnosis GPT" vào ngày 10 tháng 12.

bottom of page