Yapay Zeka, VFX kısa Filmi BYE-BYE Oluşturulmasına Nasıl Yardımcı Oldu?

Sanatçı ve yönetmen Freddy Chávez Olmos, bağımsız korku filmi BYE-BYE ‘ın VFX süreçlerini oluşturmak için yeni yapay zeka tabanlı araçları nasıl kullandığını gösteren ilginç bir teknik döküm yayınladı.

Eski Image Engine kompozisyon süpervizörü, sanal bir prodüksiyon sahnesinde sadece iki saatte çekilen iki dakikalık kısa filmi tamamlayabilmek için üretken yapay zeka platformu Leonardo.ai ile Nuke ve Photoshop’taki yeni makine öğrenimi özelliklerinden yararlanarak rotoskop ve boya çalışmaları yaptı ve sinir bozucu bir yüz dönüşümü efekti yarattı. Ayrıca En İyi Yapay Zeka Araçları Derlemesi yazımıza bakmayı unutmayın.

Çalışmanın nasıl yapıldığı ve yapay zeka iş akışlarının sınırlı bir bütçeyle karmaşık VFX’ler yaratmaya çalışan diğer bağımsız film yapımcılarına nasıl yardımcı olabileceği hakkında biraz daha bilgi edinmek için Chávez Olmos’la iletişime geçtik.

Bir şehir efsanesini sinir bozucu bir VFX kısasına dönüştürmek

Bir şehir efsanesine dayanan BYE-BYE, Karla ve Hannah adlı iki kadının ıssız bir metro platformunda tren beklerken karanlıktan tüyler ürpertici fısıltıların yükselmesini konu alıyor.

Filmin kendisi şu anda festival turunda gösteriliyor olsa da, bu da sadece kısa kliplerin çevrimiçi olarak mevcut olduğu anlamına geliyor, dökümden sonra ne olacağına dair bir tat alabilirsiniz.

Kısa bir canlı çekim için çok zaman alan efektler yaratmak amaçlı yapay zeka kullanmak

BYE-BYE, Kanada Yönetmenler Birliği’nin sekiz yönetmene Vancouver’daki Lumostage’da sanal prodüksiyonda kısa film projeleri yönetme şansı veren bir girişimiyle ortaya çıktı.

Çekim için sadece iki saati olan Chávez Olmos – daha önce özel efekt makyaj efsanesi Dick Smith’in danışmanlığını yapmış – karakterlerden biri için düşündüğü karmaşık protez makyaj görünümünü yaratmak için yeni yapay zeka tabanlı iş akışlarına yöneldi.

“Bunu sette iki saatlik süre içinde başarmanın imkansız olduğunu biliyordum, bu yüzden post prodüksiyonu kolaylaştırmak için yapay zeka ve makine öğrenimini kullanma fikri her şey haline geldi” diyor.

Chávez Olmos’un Yapay Zeka Kreatif Direktörü olduğu VFX ve animasyon stüdyosu Boxel Studio, bu çalışma için bir dizi yeni yapay zeka ve makine öğrenimi aracı kullandı.

Bunların en önemlilerinden biri, Foundry’nin endüstri standardı birleştirme yazılımı Nuke’un bir parçası olan ve kullanıcıların VFX görevlerini otomatikleştirmek için kendi sinir ağlarını eğitmelerine olanak tanıyan CopyCat’ti.

Boxel, CopyCat’i gerçek zamanlı portre matlaştırma modeli MODNet ile birlikte kullanarak iki oyuncuyu canlı çekimlerdeki arka planlardan izole etti.

Chávez Olmos, “CopyCat güçlü bir araç olduğunu kanıtladı [ve bu projede yoğun olarak kullandık]” diyor. “Rotoskoplama sürecine yardımcı olmak ve renk tonlama oturumu için gereken tüm DI matlarını oluşturmak için ona güvendik.”

Yapay zeka araçları: Dijital makyaj görünümleri oluşturmak için Leonardo.ai

Boxel ayrıca, canlı oyuncunun çok daha yaşlı bir kadına dönüştüğü önemli yüz dönüşümü efektini oluşturmak için Leonardo.ai ile birlikte CopyCat’i kullandı.

Üretken yapay zeka platformu, prodüksiyon çalışmaları için ayarlanmış bir dizi yapay zeka modeli sağlamanın yanı sıra, kullanıcıların kendi kaynak görüntülerini kullanarak özelleştirilmiş yapay zeka modellerini eğitmelerine de olanak tanıyor.

“Chávez Olmos şöyle diyor: “Yaşlı kadın karakteri için öngördüğüm stille tutarlı görünümler oluşturmak üzere kendi kişiselleştirilmiş modelimizi [oluşturmak için Leonardo.ai’yi kullandık]. “Leonardo’da tutarlı ‘stil anahtar kareleri’ oluşturarak, CopyCat’i kullanarak aralar oluşturabildik ve bunları plakayla eşleştirebildik.”

Chávez Olmos’a göre, görüntüden görüntüye yönlendirme için ControlNet özelliklerinin kullanılması çalışma için çok önemliydi. “[Oyuncunun] performansına sadık kalmamızı ve onun hareketlerinin ve pozlarının üretim sürecini yönlendirmesini sağladı” diyor.

Yapay zeka araçları: Arka plan boyaması için Photoshop’un Generative Fill özelliği

Boxel ayrıca BYE-BYE’daki boyama çalışmaları için bu yılın başlarında Photoshop’ta tanıtılan yapay zeka tabanlı nesne kaldırma ve arka plan değiştirme aracı Generative Fill’i kullandı.

Chávez Olmos bu aracı proje için “oldukça kullanışlı” olarak tanımlıyor ve ekliyor: “Yakın gelecekte, özellikle de Adobe video paketleri için piyasaya sürüldüğünde, gelişmesini dört gözle beklediğim bir araç.”

Sanal prodüksiyon ve yapay zeka: Bağımsız film yapımı için yeni olanaklar mı yaratıyor?
Kısa filmin set genişletme çalışmaları Unreal Engine’de yapıldı ve Boxel işin bu kısmında yapay zeka kullanmamış olsa da Chávez Olmos, ekibin stüdyoyla bir sonraki yönetmenlik projesi için “Unreal’da bazı heyecan verici yapay zeka/ML araçlarını test ettiğini” söylüyor.

BYE-BYE’ın Unreal Engine VP Süpervizörü ve Boxel Studio Yeni Teknolojiler Direktörü Juan Carlos Galindo, BYE-BYE’da kullanılan türden sanal prodüksiyon ve yapay zeka tabanlı iş akışlarının bir araya gelmesinin film yapımcıları için yeni çalışma yolları açtığını söylüyor.

“Gelişen teknolojiler manzarayı dönüştürüyor” diyor. “Yönetmenler artık vizyonlarını geliştirmek için tamamen yeni bir araç kutusuna sahipler.”

Freddy Chávez Olmos’un web sitesinde BYE-BYE hakkında daha fazla bilgi edinin

Chávez Olmos’un bağımsız VFX prodüksiyonlarında yapay zeka kullanımına ilişkin teknik testlerinden daha fazlasını görün

CG Channel’ı Facebook, Instagram ve X (eski adıyla Twitter) üzerinden takip ederek bu hikaye hakkında görüşlerinizi bildirin. Hikayelere yorum yapabilmenin yanı sıra, sosyal medya hesaplarımızın takipçileri, en son VFX filmleri, animasyonlar, oyun sinematikleri ve hareketli grafik projeleri için yapım aşamaları da dahil olmak üzere sitede yayınlamadığımız videoları görebilirler.

Daha fazla oku:

• Dünya’nın En iyi 10 VFX Okulu
• Görsel Efekt Öğrenmek için ne gereklidir?
• Geleceğin Sanatında Buluşma: Görsel İletişim & Tasarımda Yapay Zeka Zirvesi!
• VFX (Görsel Efekt) Nedir? Temel Çalışma Alanları Nelerdir?