Bergabunglah dengan buletin harian dan mingguan kami untuk mendapatkan berita terkini dan konten eksklusif tentang liputan AI terkemuka di industri. Pelajari lebih lanjut


Tim dari Adobe Riset Dan Universitas Hong Kong Sains dan Teknologi (HKUST) telah menciptakan sistem kecerdasan buatan yang berpotensi mengubah cara pembuatan efek visual untuk film, game, dan media interaktif.

Sebuah teknologi bernama TransPixarmenambahkan fitur penting untuk video yang dihasilkan AI: kemampuan untuk membuat elemen transparan seperti asap, pantulan, dan efek halus yang menyatu secara alami ke dalam pemandangan. Alat pencitraan AI saat ini biasanya hanya dapat menghasilkan gambar yang mulus,​​​​​​​​​​​​​​​​​​​​​​​​​​​​​​​ ​​​​​​​​​​​​​​​​​​​​​​​​​​​​​​​​​​​​​​​​​​​ ​​​​​​​​​​​​​​​​​​​​​​​​​​​​​​​​​​​​​​​​​​​dengan Baginya, TransPixar merupakan pencapaian teknis yang signifikan.

“Saluran alfa sangat penting untuk efek visual, memungkinkan elemen transparan seperti asap dan pantulan menyatu secara mulus ke dalam pemandangan,” kata Yijun Li, manajer proyek di Adobe Research dan salah satu dari ke kertas penulis. “Namun, menghasilkan video RGBA yang menyertakan saluran alfa untuk transparansi masih menjadi tantangan karena terbatasnya kumpulan data dan kesulitan dalam menyesuaikan model yang ada.”

Terobosan ini terjadi pada saat yang kritis karena permintaan akan efek visual terus meningkat di industri hiburan, periklanan, dan game. Pekerjaan VFX tradisional seringkali memerlukan kerja manual yang sungguh-sungguh dari para seniman untuk menciptakan efek transparan yang meyakinkan.

TransPixar: Transparansi untuk efek video AI

TransPixar terkenal karena kemampuannya mempertahankan kualitas tinggi saat bekerja dengan data pelatihan yang sangat terbatas. Para peneliti mencapai hal ini dengan mengembangkan metode baru yang memperluas model AI video yang sudah ada, dibandingkan membangunnya dari awal.

“Kami memperkenalkan token generasi saluran alfa baru, menginisialisasi ulang penyematan posisinya, dan menambahkan penyematan domain nol untuk membedakannya dari token RGB,” jelas Luozhou Wang, penulis utama dan peneliti di HKUST. “Dengan menggunakan skema koreksi berbasis LoRA, kami memproyeksikan token alfa ke ruang qkv sambil menjaga kualitas RGB.

Dalam demo, sistem menunjukkan hasil yang mengesankan, menciptakan berbagai efek mulai dari perintah teks sederhana, dari awan badai yang berputar-putar dan portal ajaib hingga pecahan kaca dan asap yang mengepul. Teknologi ini juga dapat menganimasikan gambar diam dengan efek transparansi, membuka kemungkinan kreatif baru bagi seniman dan desainer.

Kelompok riset mengembangkan kode mereka sendiri tersedia untuk umum GitHub. dan menyebarkan a ada demo Memeluk Wajahmemungkinkan pengembang dan peneliti untuk bereksperimen dengan teknologi ini.

Mengubah alur kerja VFX untuk pembuat konten besar dan kecil

Pengujian awal menunjukkan bahwa TransPixar dapat mempercepat dan menyederhanakan pembuatan efek visual, terutama untuk studio kecil yang tidak mampu membeli efek mahal. Meskipun sistem ini masih memerlukan daya komputasi yang signifikan untuk memproses video yang lebih panjang, potensi dampaknya terhadap industri kreatif sudah jelas.

Teknologi bukan hanya tentang perbaikan teknis. Ketika layanan streaming menuntut lebih banyak konten dan pertumbuhan produksi virtual, efek transparan yang didukung AI dapat merevolusi operasi studio. Tim kecil mampu menciptakan efek yang dulunya membutuhkan studio besar, sementara proyek produksi yang lebih besar dapat diselesaikan lebih cepat.

TransPixar bisa sangat berharga untuk aplikasi real-time. Video game, aplikasi AR, dan produksi langsung dapat menciptakan efek transparan dalam sekejap, sesuatu yang saat ini membutuhkan waktu berjam-jam atau berhari-hari.

Kemajuan ini terjadi pada saat yang sangat penting bagi Adobe, seperti yang dilakukan oleh perusahaan Stabilitas AI Dan landasan pacu bersaing dalam menciptakan alat efek profesional. Studio-studio besar sudah mulai menggunakan AI untuk memangkas biaya, jadi waktu yang tepat bagi TransPixar adalah waktu yang tepat.

Industri hiburan menghadapi tiga tantangan yang semakin besar: Pemirsa ingin lebih banyak konten, anggarannya ketatdan di sana tidak cukup seniman efek. TransPixar menawarkan solusi untuk menciptakan efek lebih cepat, lebih murah dan dengan kualitas lebih konsisten.

Pertanyaan sebenarnya bukanlah apakah AI akan menggantikan efek visual, tetapi apakah alur kerja VFX tradisional akan ada lima tahun dari sekarang.


Source link