Pada hari Rabu, pengembang yang berbasis di San Francisco bernama Liu Liu merilis Draw Things: AI Generation, aplikasi gratis yang tersedia di App Store yang memungkinkan pemilik iPhone menjalankan generator gambar Stable Diffusion AI yang populer.

Ketik deskripsi, dan aplikasi menghasilkan gambar dalam beberapa menit. Ini adalah langkah penting untuk menghadirkan sintesis gambar ke audiens yang lebih luas—dengan privasi tambahan untuk menjalankannya di perangkat keras Anda sendiri.

Diperkenalkan pada bulan Agustus, Stable Diffusion (SD) adalah model generator gambar AI yang membuat gambar baru dari deskripsi teks (disebut “prompts”). Biasanya, orang menjalankan SD melalui layanan DreamStudio komersial, di mesin cloud jarak jauh dengan waktu komputasi sewaan, atau secara lokal di PC menggunakan implementasi sumber terbuka khusus. Saat berjalan secara lokal, SD membutuhkan GPU yang cukup kuat untuk menghasilkan gambar dengan cepat, tetapi beberapa pengembang mengoptimalkan model untuk berjalan pada GPU lama dengan VRAM lebih sedikit (jika Anda tidak keberatan menunggu lebih lama untuk melihat hasilnya).

Dengan nada yang sama, Liu Liu telah berhasil mengoptimalkan Stable Diffusion untuk berjalan di iPhone, sebuah proses yang agak sulit yang dijelaskan pengembang dalam posting blog. “Tantangan utamanya adalah menjalankan aplikasi pada perangkat iPhone dengan RAM 6GiB,” tulis Liu Liu. “6GiB terdengar banyak, tetapi iOS akan mulai mematikan aplikasi Anda jika Anda menggunakan lebih dari 2,8GiB pada perangkat 6GiB, dan lebih dari 2GiB pada perangkat 4GiB.”

Saat pertama kali menjalankan Draw Things, aplikasi mengunduh beberapa file yang diperlukan—termasuk model Stable Diffusion 1.4—ke iPhone Anda. Untuk menggunakannya, ketik perintah di bagian atas layar, lalu ketuk “Hasilkan”. Di antara pembuatan gambar, ketuk nomor di bagian tengah atas layar untuk mengacak seed, yang merupakan nomor yang sebagian memandu pembuatan gambar.

Di iPhone 11 Pro kami, menghasilkan gambar 384×384 membutuhkan waktu lebih dari dua menit. Lebih cepat pada iPhone 14 Pro, menurut Liu Liu, menghasilkan gambar dalam waktu sekitar satu menit. Either way, SD intensif secara komputasi. Setelah beberapa generasi berturut-turut, iPhone kami terasa hangat saat disentuh.

Perlu dicatat bahwa dengan Difusi Stabil, gambar 384×384 sering menghasilkan hasil yang relatif buruk dan detail rendah karena pembuat SD melatih model menggunakan gambar 512×512. Saat mencoba membuat gambar 512×512 di iPhone 11 Pro kami, kami menerima peringatan dan tetap melanjutkan, tetapi aplikasi macet ke layar hitam.

Selain tugas pembuatan gambar biasa, Draw Things juga mendukung inpainting, yang memungkinkan Anda mengganti sebagian gambar dengan gambar buatan AI, dan memuat model sintesis gambar tambahan seperti model “Difusi Disney Modern” yang tidak sah (yang menghasilkan Disney- mencari karakter) dan model “Waifu Diffusion” bertenaga anime (kami menguji, dan dimungkinkan untuk menghasilkan materi NSFW menggunakan aplikasi, jadi berhati-hatilah). Dimasukkannya kemampuan tersebut berarti Draw Things mungkin tidak akan bertahan lama di App Store jika menjadi populer, karena konten yang dihasilkannya mungkin melanggar ketentuan layanan Apple.

Apa pun nasibnya, Draw Things terasa seperti bukti konsep yang penting, menunjukkan bahwa Difusi Stabil dapat berjalan secara lokal di iPhone, meskipun lambat. Jika aplikasi bertahan—mungkin dengan beberapa filter atau modifikasi—Liu Liu menjelaskan ruang untuk pengoptimalan potensial di masa mendatang yang dapat mempercepat: “Saya mungkin masih menyisakan 50% performa.”

Ini bukan pertama kalinya Stable Diffusion berjalan di iPhone. Pada bulan September, pengembang Matt Waller menjalankan Stable Diffusion secara lokal di iPhone XS-nya, tetapi dia tidak menyediakan aplikasi App Store yang memungkinkan orang lain meniru prestasi tersebut. Kita mungkin akan melihat lebih banyak sintesis citra AI lokal pada ponsel cerdas karena daya komputasi perangkat terus meningkat.

Sumber :

Baca Juga :