Runway Ubah Bug Drift Model Video AI Menjadi Fitur Optimasi Otomatis

Runway, perusahaan riset AI terapan yang mengembangkan model dunia umum, memperkenalkan pendekatan inovatif dalam menangani keterbatasan teknis pada model video real-time. Alih-alih memperbaiki bug secara langsung di lapisan belakang, perusahaan memilih mengintegrasikannya sebagai fitur antarmuka pengguna yang meningkatkan pengalaman secara keseluruhan. Langkah ini muncul saat mengembangkan Runway Characters, model yang memungkinkan interaksi video dua arah tanpa latensi dengan avatar buatan AI.

Proses pengembangan dimulai dari pra-pelatihan model fondasi besar yang kemudian disuling menjadi model lebih kecil dan cepat melalui teknik distilasi. Metode ini memangkas waktu generasi hingga 80 hingga 90 persen. Setelah itu, tim menerapkan adversarial post-training untuk memulihkan ketajaman visual yang hilang. Namun, fase-fase tersebut justru memunculkan masalah drift, di mana karakter bergeser dari pusat bingkai selama generasi berlangsung.

Tim menghabiskan berminggu-minggu mencoba memperbaiki arsitektur model inti, tetapi akhirnya menemukan bahwa pemusatan gambar masukan awal mampu menjaga stabilitas output. Alih-alih melanjutkan perbaikan belakang yang memakan waktu, Runway memperkenalkan fitur bernama Optimize for Image Quality yang secara otomatis menyesuaikan posisi gambar pengguna sebelum proses generasi dimulai. Pendekatan ini mengubah persepsi keterbatasan teknis menjadi nilai tambah bagi pengguna.

Selain itu, Runway menekankan pentingnya evaluasi berkualitas tinggi yang melibatkan lintas fungsi tim produk, desain, riset, dan penjualan. Workshop internal dilakukan untuk menyamakan persepsi mengenai mode kegagalan, termasuk penggunaan karakter non-manusia seperti Tooth untuk menguji batas struktur wajah. Evaluasi dicatat dalam lembar kerja sederhana dengan ambang batas persentase kelulusan yang telah ditetapkan sebelumnya. Untuk skala besar, model bahasa kini digunakan sebagai penilai otomatis terhadap artefak visual.

Dari sisi infrastruktur, pengiriman video global pada 24 frame per detik memerlukan optimasi menyeluruh, termasuk perubahan kernel mendalam bersama penyedia perangkat keras. Insiden penurunan frame rate pada 8 persen panggilan API diatasi melalui observasi mendalam yang mengarah pada penggantian GPU fisik di pusat data tertentu. Hal ini menunjukkan bahwa anomali perangkat keras dapat langsung memengaruhi performa model.

Dua konteks tambahan yang relevan adalah potensi pendekatan ini mempercepat adopsi alat video AI di sektor pemasaran enterprise, karena mengurangi waktu pengembangan sambil menjaga kualitas yang konsisten. Selain itu, strategi mengubah bug menjadi fitur mencerminkan tren industri yang semakin menekankan desain berpusat pada pengguna di tengah evolusi cepat model generatif, sehingga membantu perusahaan non-pembangun model untuk menerapkan pelajaran serupa dalam pipeline real-time mereka.

Di masa depan, peran kreatif enterprise bergeser dari pembuatan aset tunggal menuju definisi parameter estetika dan properti intelektual yang dapat dimanfaatkan model untuk menghasilkan konten secara dinamis. Runway menegaskan bahwa iterasi konsisten diperlukan untuk keluar dari fase kesulitan berkepanjangan sebelum mencapai peningkatan eksponensial.

Related posts