Yapay Zeka ile 3D Karakterleriniz için İnandırıcı Konuşma Animasyonu Oluşturun!

Bu yazımızda Karakter sanatçısı Tobias Kolodziey tarafından Yapay Zeka Ses Kütüphaneleri ile (AI Voice) 3D karakterleriniz için inandırıcı konuşma animasyonu ve animasyonlarını nasıl yapacağınızı öğrenceksiniz. Ayrıca 3D Animasyon Nasıl Yapılır? ile ilgili oluşturduğumuz makalemize bakmayı unutmayın.

GİRİŞ

Reallusion’ın Character Creator’ı için 5 yılı aşkın süredir Karakter Sanatçısı ve İçerik Geliştiricisiyim ve her zaman yarattıklarıma hayat vermenin kolay bir yolunu arıyordum. Daha önce birkaç yıl CGI ve animasyon film endüstrisinde çalıştığım için, karakter seslendirmenin ne kadar zaman alıcı ve yoğun maliyetli olabileceğini biliyorum. Bir seslendirme sanatçısı tutmanız, ses kaydını yapmanız, sesi düzenlemeniz, yazılımınıza aktarmanız ve ardından (kare kare) karakterinizin konuşma ve yüz performansını düzenlemeniz gerekir. Seslendirme ve düzenleme bir iştir, animasyon başka bir iştir. Bu da haftalar süren bir çalışma ve proje için binlerce dolar anlamına gelebilir ki bu da her yaratıcının karşılayabileceği bir şey değildir.

Önerilen Video:

Reallusion ve Replica tarafından sağlanan yeni işbirlikçi çözümü test edecek kadar şanslıydım. Replica, yapay zeka ses kütüphaneleri sağlama konusunda uzmanlaşmış bir şirket. Replica sayesinde artık parmaklarımın ucunda doğal seslerden oluşan devasa bir kütüphaneye sahibim. Sonra iClone için Yapay Zeka Ses Aktörleri Eklentisinin animatörler için yepyeni bir yol açtığını öğrendim: Sadece avatarınız için metni yazıyorsunuz, tek tıkla iClone’a gönderiyorsunuz, ardından avatarınız otomatik dudak senkronizasyonu ile canlandırılıyor.

Daha derin bir inceleme yaptıktan sonra, bu çözümün nasıl gerçek bir oyun değiştirici olduğunu diğer içerik oluşturuculara göstermek için bu makaleyi yazmaya karar verdim. Umarım hepiniz bunu faydalı bulursunuz ve belki de dudak senkronizasyonu animasyonunun nasıl oluşturulacağına dair bakış açılarınızı sonsuza dek değiştirirsiniz.

Tobias Kolodziey (TokoMotion) Hakkında

Adım Tobias Kolodziey ve birkaç yıldır animasyon ve CGI endüstrisinde çalışıyorum. Bir karakter sanatçısı olarak, kendi fikirlerimi geliştirmek ve üretmek için 2011 yılında Studio ToKoMotion’ı kurdum. O zamandan beri, özellikle eğitim-eğlence alanında bazı küçük ama ilginç projelerde müşterilerle çalışma fırsatım oldu. Çalışmalarımın daha fazlasını Artstation’da görebilirsiniz.

Bu perde arkası makalede, iClone için yeni Replica eklentisinin karakterlerinizi sadece birkaç tıklamayla hayata geçirmenize nasıl yardımcı olacağına dair hızlı bir genel bakış sunacağım. Lütfen iClone yazılımınıza (ücretsiz) Replica eklentisini yüklediğinizden emin olun. Eklenti kurulumu ve diğer yararlı ipuçları ve püf noktaları hakkında daha fazla bilgi için lütfen resmi Reallusion ürün sayfasını ziyaret edin.

Replica Link üzerinden iClone’a bağlanabilmek için Replica Studio yazılımının da bilgisayarınızda yüklü olması gerekir. (Ücretsiz) bir hesap oluşturmak ve yazılımı indirmek için lütfen burayı ziyaret edin.

ICLONE İLE BAŞLAYALIM

şimdi başlayalım ve Replica for iClone ‘un neler sunabileceğini görelim. Eklentiyi iClone’da açmak için MainMenu > Plugins > Replica Studios > Replica Link’e gidin. Artık Replica Link aracılığıyla sahnenizdeki karakteri seçebilirsiniz ve Replica Studio’dan ses almaya hazırdır.

REPLICA STUDIO İLE ÇALIŞMAK

Replica Studio Sandbox’a geçin ve birkaç diyalog satırı yazın, ardından Replica ses kitaplığından bir ses seçmek için Bir ses seç… (Select a voice…) seçeneğine tıklayın.

Kütüphanede gezinebilir ve sesleri önizleyebilir veya sesin belirli özelliklerini aramak için sağlanan filtreleri kullanabilirsiniz. Burada toplam 45’ten fazla ses bulunabilir.

Uygun sesi seçtikten sonra, Replica Studio’nun karakterinizin diyaloğu için sesi oluşturmasına izin vermek için Oynat (Play) düğmesine basmanız yeterlidir. Bu, farklı sesleri gözden geçirmeniz için hızlı bir yol sağlar.

Sesi beğeninize göre daha fazla ayarlamak için “Stil”, “Konuşma Hızı” (Speech Rate) veya “Perde” (Pitch) ile oynamayı deneyin ve iClone’a aktarmak için çekimi kaydedin.

OTOMATIK YÜZ ANIMASYONU STILLERI OLUŞTURUN

Replica Studio’da iClone’a Aktar’a (Export to iClone) tıkladıktan sonra, iClone sizden karakterinize oluşturulan sesle birlikte uygulanacak bir Animasyon Stili ve Güç Seviyesi seçmenizi isteyecektir. Karakterinizin yüz animasyonu için “Öfke “den “Sürpriz “e kadar farklı ruh halleri için bir dizi animasyon stili mevcuttur. Uygula’ya (Apply) tıklayın ve gerisini iClone’a bırakın.

İşiniz bittiğinde karakteriniz kulağa hoş gelen bir sese, harika bir dudak senkronizasyonuna ve temel bir yüz animasyonuna sahip olacak. Burada karakterinizin seçtiğiniz konuşma stiline uygun temel bir yüz animasyonuyla konuştuğunu görebilirsiniz.

Konuşma Animasyonu stilinden veya güç seviyesinden memnun değilseniz Content > Animation Template > Face > Expression_Loop altında bulabileceğiniz İfade Döngüsü (Expression Loop) ön ayarlarını kullanarak bunu her zaman değiştirebilirsiniz. Söylemeye gerek yok, kendi yüz ifadesi kliplerinizi oluşturabilirsiniz, ancak bu kütüphane size başka bir otomatik ön ayar hareketleri seviyesi sunar.

Iclone ile Konuşma Animasyonu için İnce Ayar

Daha sonra karakterinizin yüz animasyonuna ince ayar yapmak için iClone’un yerleşik animasyon araçlarına, Face Puppet ve Face Key’e göz attığınızdan emin olun. Bu araçlarla tüm yüze veya sadece gözler, kaşlar veya ağız/dudak gibi belirli bölgelere daha fazla yüz ifadesi eklemek kolaydır.

Face Key, karakterinizin diyaloğundaki belirli harfler/kelimeler için ayrı ağız/dudak şekilleri oluşturarak benzersiz görünmesini sağlamak için mükemmel bir araçtır.

Özel biçimler oluşturmak ve belirli harfleri ya da kelimeleri vurgulamak için Kas (Muscle), İfade (Expression) ve Değiştirme (Modify) kaydırıcılarını kullanın. Ayrıca, mükemmel dudak senkronizasyonunu elde etmek için ses parçasının otomatik olarak oluşturulan görüntülerini manuel olarak ayarlayabilirsiniz.

Son olarak, karakteriniz için birilerinin animasyonlarını oluşturun, karakterinize hayat vermek için sahnenize aksesuarlar ve efektler ekleyin; bu hiç bu kadar hızlı ve kolay olmamıştı!

Bu iş akışının beklediğimden çok daha kolay olduğu ortaya çıktı. Denemenizi şiddetle tavsiye ederim. İyi eğlenceler!

Daha fazla oku:

• Devrim Yaratan Teknoloji: 3D Gaussian Splatting Nedir?
• Alembic: Animasyonlu Sahneleri Dışa Aktarma Sanatı
• KeyShot Fuzz ile Fırça, Tel ve Kıl gibi Nesneler Nasıl Oluşturulur?
• Yapay Zeka Destekli 3D Karakter Oluşturmanın 7 Adımı