Kemajuan terbaru dalam teknologi suara terlihat jelas dengan dirilisnya model sintesis ucapan yang disempurnakan, "gpt-realtime", dan penyempurnaan pada Realtime API. API ini menyederhanakan integrasi dengan server MCP jarak jauh, pengambilan gambar, dan panggilan SIP, menyediakan alat bagi pengembang dan perusahaan untuk membangun agen suara yang lebih canggih dan responsif. Agen-agen ini kemudian dapat memanfaatkan konteks dan kapabilitas tambahan untuk menangani berbagai tugas yang lebih luas.

Model gpt-realtime merupakan terobosan besar dalam sintesis ucapan, menghasilkan suara yang lebih alami dan ekspresif. Model ini unggul dalam memahami instruksi yang kompleks dan dapat beralih bahasa di tengah kalimat, meningkatkan pengalaman pengguna dalam dukungan pelanggan dan aplikasi interaktif lainnya. Peningkatan pemahaman model ini terbukti dari kemampuannya untuk menafsirkan pesan sistem dan perintah pengembang dengan lebih akurat. Selain itu, dua suara baru, Cedar dan Marin, telah ditambahkan, yang semakin meningkatkan keragaman pilihan suara yang tersedia melalui Realtime API.

Sejak rilis beta publiknya, API Realtime telah dioptimalkan dengan fokus pada keandalan, latency rendah, dan produksi audio berkualitas tinggi. Pendekatan API model tunggal ini menyederhanakan proses pembuatan audio, mengurangi latency , dan mempertahankan nuansa suara. Model gpt-realtime dilatih untuk mengikuti instruksi terperinci dan memanggil alat secara akurat, menjadikannya solusi yang andal untuk menerapkan agen suara di berbagai lingkungan produksi.

Pengembang kini dapat memanfaatkan API Realtime yang tersedia secara umum dan model gpt-realtime yang baru. API ini menawarkan pengurangan harga sebesar 20% dibandingkan penawaran sebelumnya. Harga API dirancang agar hemat biaya, terutama untuk sesi yang panjang, dan pengembang dapat menetapkan batas token cerdas serta memangkas percakapan secara efisien. Bagi mereka yang tertarik mencoba fitur-fitur baru ini, dokumentasi yang komprehensif dan area uji coba tersedia untuk memudahkan integrasi dan adopsi.