Bergabunglah dengan buletin harian dan mingguan kami untuk mendapatkan pembaruan terkini dan konten eksklusif tentang liputan AI terkemuka di industri. Pelajari Lebih Lanjut
Sebuah tim dari Adobe Research dan Universitas Sains dan Teknologi Hong Kong (HKUST) telah mengembangkan sistem kecerdasan buatan yang dapat mengubah cara pembuatan efek visual untuk film, game, dan media interaktif.
Teknologi yang disebut TransPixar ini menambahkan fitur penting pada video yang dihasilkan AI: kemampuan untuk menciptakan elemen tembus pandang seperti asap, pantulan, dan efek halus yang menyatu secara alami ke dalam pemandangan. Alat video AI saat ini biasanya hanya dapat menghasilkan gambar yang solid, menjadikan TransPixar sebagai pencapaian teknis yang signifikan.
“Saluran alfa sangat penting untuk efek visual, memungkinkan elemen transparan seperti asap dan pantulan menyatu dengan mulus ke dalam pemandangan,” kata Yijun Li, pemimpin proyek di Adobe Research dan salah satu penulis makalah. “Namun, menghasilkan video RGBA, yang mencakup saluran alfa untuk transparansi, masih menjadi tantangan karena terbatasnya kumpulan data dan sulitnya mengadaptasi model yang ada.”
Terobosan ini terjadi pada saat yang kritis karena permintaan akan efek visual terus meningkat di industri hiburan, periklanan, dan game. Pekerjaan VFX tradisional seringkali membutuhkan upaya manual yang sungguh-sungguh dari para seniman untuk menciptakan efek transparan yang meyakinkan.
TransPixar: Menghadirkan transparansi pada efek visual AI
Apa yang membuat TransPixar menonjol adalah kemampuannya untuk mempertahankan kualitas tinggi saat bekerja dengan data pelatihan yang sangat terbatas. Para peneliti mencapai hal ini dengan mengembangkan pendekatan baru yang memperluas model AI video yang sudah ada, dibandingkan membangunnya dari awal.
“Kami memperkenalkan token baru untuk pembuatan saluran alfa, menginisialisasi ulang penyematan posisinya, dan menambahkan penyematan domain tanpa inisialisasi untuk membedakannya dari token RGB,” jelas Luozhou Wang, penulis utama dan peneliti di HKUST. “Dengan menggunakan skema penyesuaian berbasis LoRA, kami memproyeksikan token alfa ke dalam ruang qkv sambil menjaga kualitas RGB.”
Dalam demonstrasinya, sistem ini menunjukkan hasil yang mengesankan dengan menghasilkan beragam efek mulai dari perintah teks sederhana — mulai dari awan badai yang berputar-putar dan portal magis hingga pecahan kaca dan asap yang mengepul. Teknologi ini juga dapat menganimasikan gambar diam dengan efek transparansi, membuka kemungkinan kreatif baru bagi seniman dan desainer.
Tim peneliti telah membuat kode mereka tersedia untuk umum di GitHub dan menerapkan demo di Hugging Face, yang memungkinkan pengembang dan peneliti bereksperimen dengan teknologi tersebut.
Mengubah alur kerja VFX untuk pembuat konten besar dan kecil
Pengujian awal menunjukkan TransPixar dapat membuat produksi efek visual lebih cepat dan sederhana, terutama untuk studio kecil yang tidak mampu membayar pekerjaan efek yang mahal. Meskipun sistem ini masih memerlukan daya komputasi yang signifikan untuk memproses video yang lebih panjang, potensi dampaknya terhadap industri kreatif sudah jelas.
Teknologi jauh lebih penting daripada perbaikan teknis. Ketika layanan streaming membutuhkan lebih banyak konten dan pertumbuhan produksi virtual, efek transparan yang dihasilkan AI dapat mengubah cara studio beroperasi. Tim kecil dapat menciptakan efek yang dahulu diperlukan oleh studio besar, sementara produksi yang lebih besar dapat menyelesaikan proyek lebih cepat.
TransPixar bisa sangat berharga untuk penggunaan real-time. Video game, aplikasi AR, dan produksi langsung dapat menciptakan efek transparan secara instan — sesuatu yang saat ini memerlukan kerja berjam-jam atau berhari-hari.
Kemajuan ini terjadi pada momen penting bagi Adobe ketika perusahaan seperti Stability AI dan Runway bersaing untuk mengembangkan alat efek profesional. Studio-studio besar telah memanfaatkan AI untuk mengurangi biaya, sehingga menjadikan waktu TransPixar ideal.
Industri hiburan menghadapi tiga tantangan yang semakin besar: Pemirsa menginginkan lebih banyak konten, anggaran yang ketat, dan jumlah artis efek yang tidak mencukupi. TransPixar menawarkan solusi dengan membuat efek lebih cepat, lebih murah, dan kualitas lebih konsisten.
Pertanyaan sebenarnya bukanlah apakah AI akan mengubah efek visual — melainkan apakah alur kerja VFX tradisional akan ada dalam lima tahun.
