Google Cloud mengumumkan solusi pembuatan teks-ke-gambar MediaPipe di perangkat. Awal tahun ini, pratinjau pembuatan teks-ke-gambar pada perangkat menggunakan model difusi untuk Android diperkenalkan melalui MediaPipe Solutions. Teknologi tersebut saat ini tersedia sebagai Image Generator, sebuah solusi eksperimental awal yang dapat dicoba oleh pengembang pada perangkat Android. Hal ini memungkinkan perangkat kelas atas menghasilkan gambar sepenuhnya di perangkat hanya dalam waktu sekitar 15 detik.

Tugas MediaPipe Image Generator yang baru dapat digunakan dalam tiga cara utama. Pertama, pembuatan teks-ke-gambar dapat dicapai berdasarkan perintah teks menggunakan model difusi standar. Pembuatan teks-ke-gambar yang dapat dikontrol kemudian dapat dilakukan berdasarkan perintah teks dan penyesuaian gambar menggunakan plugin difusi. Terakhir, pembuatan teks-ke-gambar yang disesuaikan dapat dilakukan berdasarkan perintah teks menggunakan bobot adaptif peringkat rendah (LoRA). Hal ini memungkinkan pembuatan gambar konseptual yang telah ditentukan sebelumnya untuk kasus penggunaan tertentu.

Penting untuk diperhatikan bahwa Image Generation API mendukung model yang sama persis dengan arsitektur Stable Diffusion v1.5. Pengembang dapat menggunakan model yang telah dilatih atau disempurnakan dengan mengonversinya ke format model yang didukung oleh MediaPipe Image Generator menggunakan skrip konversi.

Cara termudah untuk mencoba tugas pembuat gambar adalah dengan menampilkan prompt teks dan menerima gambar yang dihasilkan menggunakan model difusi. Setelah membuat ImageGenerator baru, Anda dapat membuat gambar baru dengan meneruskan prompt, jumlah iterasi yang perlu dihasilkan generator, dan nilai seed. Karena ini melakukan operasi pemblokiran untuk membuat gambar baru, disarankan agar dijalankan pada thread latar belakang sebelum mengembalikan objek hasil bitmap baru. saus: