Generatived (Beta) | Cung cấp tin tức và xu hướng mới nhất về AI sáng tạo

Gemini 2.5 được phát hành với các cải tiến cho Vertex AI, bao gồm khả năng điều chỉnh cho đầu vào hình ảnh, âm thanh và video. Bản cập nhật cũng cho phép người dùng tinh chỉnh các mô hình ngôn ngữ quy mô lớn (LLM) bằng dữ liệu của riêng họ, cho phép họ xây dựng các mô hình chuyên biệt cho các bối cảnh và nhiệm vụ kinh doanh cụ thể. Các tính năng mới này giúp phát triển nhiều ứng dụng dễ dàng hơn, bao gồm tóm tắt video tự động, nhận dạng sự kiện chi tiết, kiểm duyệt nội dung và cải thiện phụ đề video.

Công ty phác thảo các phương pháp hay nhất để tiến hành các thí nghiệm điều chỉnh hiệu quả với đầu vào video. Điều này bao gồm việc tạo ra các lời nhắc chính xác xác định rõ ràng bối cảnh tác vụ, định nghĩa tác vụ và thông số kỹ thuật đầu ra. Đối với các tác vụ video đa nhãn, họ khuyến nghị cân bằng phân phối nhãn và sử dụng công thức đa nhãn cho các tác vụ có ít hơn 10 nhãn trên mỗi video. Đối với các tác vụ video đơn nhãn, họ khuyến nghị cân bằng phân phối dữ liệu để tránh thiên vị về phía lớp đa số.

Để chuẩn bị cho việc điều chỉnh video, bạn nên sử dụng các tệp .jsonl cho các tập dữ liệu đào tạo và xác thực của mình và đảm bảo không có sự chồng chéo giữa chúng. Khi điều chỉnh các mô hình cho Gemini 2.0 trở lên, chúng tôi khuyên bạn nên sử dụng cài đặt MEDIA_RESOLUTION_LOW để đào tạo hiệu quả. Cài đặt này dẫn đến ít mã thông báo hơn đại diện cho mỗi khung hình, có thể tăng tốc quá trình đào tạo mà không ảnh hưởng đáng kể đến hiệu suất.

Cuối cùng, công ty cung cấp hướng dẫn về các thiết lập siêu tham số để điều chỉnh, khuyến nghị bắt đầu với các thiết lập mặc định thông minh do Vertex AI cung cấp. Các thiết lập mặc định này dựa trên các đặc điểm của tập dữ liệu và đóng vai trò là cơ sở vững chắc để tối ưu hóa thêm. Người dùng có thể đánh giá hiệu suất của mô hình đã điều chỉnh bằng biểu đồ mất mát và độ chính xác, đồng thời điều chỉnh định dạng, ngữ cảnh và phân phối các lời nhắc suy luận cho phù hợp với tập dữ liệu điều chỉnh của họ để đạt được kết quả tối ưu.