ZoeDepth: 2D Resimlerden 3D Derinlik Oluşturma Aracı ile Tanışın!
Sanat ve tasarımda, bir ortamın derinliğini anlamak çok önemlidir. Derinlik, nesnelerin izleyiciden ne kadar uzak veya yakın olduğunun algılanmasıdır. Bir sahneye boyutluluk ve gerçekçilik hissi verir. Derinlik, 3D render işlemlerinde doğal olarak kullanılsa da 2D mat resimler veya arka plan plakalarıyla çalışırken bunu yakalamak veya oluşturmak her zaman kolay değildir. İşte bu noktada ZoeDepth devreye giriyor. Derinliği etkili bir şekilde hesaplayarak sanatçıların 2D arka planlardan gerçekçi 3D meshler oluşturmasını sağlayan benzersiz bir araçtır.
Bu makalede ZoeDepth’in 3D prodüksiyonda sahne oluşturmayı hızlandırmak, erken görselleştirme yapmak ve bloklama sırasında daha hızlı yineleme yapmak için aracın nasıl kullanılabileceği incelenecektir.
Mat Boyama Nedir?
Mat boyama, film endüstrisinde sette bulunmayan manzaraların, setlerin veya uzak konumların illüzyonunu yaratmak için kullanılan bir görsel sanat tekniğidir. Geleneksel olarak sanatçılar bu sahneleri büyük cam levhalar üzerine boyar ve daha sonra canlı aksiyon görüntüleriyle bütünleştirirlerdi.
Ancak dijital çağ bu sanat formunu dönüştürdü. Günümüzde mat ressamlar sahnelerini oluşturmak üzere çeşitli unsurları birleştirmek ve değiştirmek için dijital araçlar kullanıyorlar. Gerçek dünya görüntülerini kullanabilir, 3D modeller oluşturabilir, dokular uygulayabilir ve aydınlatmayı ayarlayabilirler.
3D teknolojisi mat boyamanın yeteneklerini büyük ölçüde geliştirmiştir. Sanatçıların kamera eşleme olarak bilinen bir teknikle 2.5D çekimleri 3D kameralarla canlandırmasına olanak tanır. Ayrıca şehirler veya manzaralar gibi karmaşık set uzantılarının oluşturulmasını da mümkün kılıyor.
Bağımsız 3D animasyonlu kısa filmler için, kameradan daha uzaktaki öğeleri modellemek ve dokulandırmak her zaman mümkün değildir, ancak yalnızca bir görüntü fonuna güvenmek kamera hareketini sınırlar ve Sinematografik sürükleyicilik için büyük fırsat maliyetleri yaratır. Bunun nedeni, bir nesnenin konumunun veya yönünün farklı konumlardan bakıldığında değişiyor gibi göründüğü Paralaks adı verilen görsel efekttir.
Bu tıpkı hareket halindeki bir arabanın içindeyken pencereden dışarı baktığınızda yakındaki ağaçlar hızla geçip giderken uzaktaki dağların yavaşça hareket ediyormuş gibi görünmesi gibidir. Bu Paralaks’tır ve görsel deneyimimizin ayrılmaz bir parçasıdır. Ne yazık ki, Paralaks elde etmek için 2.5D yaklaşımı gibi daha hızlı geçici çözümler bile derinlik haritaları oluşturmak ve görüntüleri geometriye yansıtmak için önemli ölçüde zaman harcanmasını gerektirir – en azından Zoedepth gibi bir teknolojiden önce.
ZoeDepth AI Aracını Anlamak
ZoeDepth yapay zeka aracının derinliği etkili bir şekilde hesaplama yeteneği onu diğer araçlardan ayırır. Daha doğru derinlik tahmini sağlamak için göreceli ve metrik derinliği birleştirir. Göreceli derinlik, bir görüntüdeki nesneler arasındaki mesafenin karşılaştırılmasıdır; metrik derinlik ise nesnelerin kameraya olan mutlak uzaklığıdır. Bu iki derinlik türünü birleştiren ZoeDepth, sahnenin hem perspektifini hem de ölçeğini hesaba katabilir. Bu, bir görüntünün ön plan, orta plan ve arka plan öğelerini anlama yeteneğine dönüşür. ZoeDepth, bu unsurları ayırt ederek orijinal ortamı doğru bir şekilde temsil eden bir 3D ağ oluşturabilir.
3D Mesh Oluşturma
Bir ortam görüntüsünden 3D mesh oluştururken, görüntünün farklı unsurları arasındaki uzamsal ilişkiyi anlamak çok önemlidir. ZoeDepth, 2D bir görüntüden 3D bir ağ oluşturmak için derinlik haritası füzyonu adı verilen bir işlem kullanır. Derinlik haritası, orijinal görüntüdeki her bir pikselin derinliğini gösteren bir görüntüdür. ZoeDepth her görüntü için iki derinlik haritası oluşturur: biri göreli derinlik ve diğeri metrik derinliktir. Daha sonra bu iki derinlik haritasını bir araya getirerek sahnenin hem perspektifini hem de ölçeğini yakalayan nihai bir derinlik haritası oluşturur. ZoeDepth daha sonra bu son derinlik haritasını kullanarak orijinal görüntünün bütünlüğünü koruyan, gerçekçi ve sürükleyici bir deneyim sağlayan bir 3D ağ oluşturur.
3D Sanatçılar için Avantajları
3D sanatçılar için ZoeDepth oyunun kurallarını değiştiriyor. Kutudan çıkar çıkmaz iyi paralakslı ortamlar için arka planlar oluşturmalarını sağlayabiliyor. ZoeDepth ile sanatçılar, kapsamlı manuel çalışmaya gerek kalmadan iyi paralaks içeren 3D meshler oluşturabilir. ZoeDepth tarafından üretilen derinlik haritaları, fotoğrafçılık ve film yapımında seçici odak, bokeh veya arka plan kaldırma gibi işlem sonrası efektler için de kullanılabilir. Bu efektler bir sahnenin estetiğini ve ruh halini geliştirerek onu daha çekici ve büyüleyici hale getirebilir.
Aşağıda ki videoda gördüğünüz gibi oluşturulan ağın Blender sahnesine aktarılmış bir test render’ı. Paralaks, orta plandaki kalıntılarda ve arkasındaki sisli kara kütlesinde belirgin bir şekilde görülüyor. ZoeDepth’in oluşturduğu model sayesinde, orta ve arka plan zaten birbirinden ayrı ve uzak olduğu için Alan Derinliği ve Sis Geçişi anında kullanılabildi.
ZoeDepth, görüntülerde kodlanmış örtük 3D bilgilerinden yararlanarak geleneksel dijital 3D tekniklerine göre sanatçılara önemli ölçüde zaman ve prodüksiyon maliyeti tasarrufu sağlayan birçok önemli avantaj sağlıyor.
Basitleştirilmiş Dokulandırma
Oluşturulan 3D kafeslerin uzaktan görüntülenmesi amaçlandığından, karmaşık PBR dokulandırması gereksizdir. Sahneler, bir emisyon gölgelendiricisine yansıtılan tek bir görüntü kullanabilir. Bu, karmaşık 3D geometriyi tamamen dokulandırmaya kıyasla doku belleği kullanımını ve render sürelerini önemli ölçüde azaltır.
Azaltılmış Geometri
2,5 boyutlu bir görüntüde sahte derinlik oluşturmak için artık ağır alt bölümlere ayrılmış geometri ve yer değiştirme haritalarına gerek yok. ZoeDepth, gerçek 3D şekil bilgilerini doğrudan kaynak görüntüden çıkarır. Bu, sahne veri boyutlarını hafifletir ve görüntü alanı etkileşimini hızlandırır.
Kolaylaştırılmış İş Akışı
Sanatçılar, uzak mimari detayları veya manzaraları elle modellemenin uzun sürecinden kaçınabilir. Mat boyama, fotogrametri veya yapay zeka üretimi ile oluşturulan görüntülerin bir sahneyi doldurmak için ZoeDepth tarafından yalnızca bir kez analiz edilmesi gerekir. Bu da geleneksel olarak varlıkları dijital olarak yeniden oluşturmak için harcanan saatleri ortadan kaldırıyor.
Yinelemeli Test
Erken sahne bloklama, kamera bloklama, ışıklandırma çalışmaları ve test renderları, geleneksel modellemeye kıyasla ZoeDepth’in hafif 3D mesh’lerini kullanarak bu aşamalar önemli ölçüde hızlanır.
Sonuç
ZoeDepth, etkili derinlik hesaplamasıyla 3D sanat ve tasarım alanında devrim yaratacak gibi görünüyor. Bir görüntünün farklı unsurlarını anlayarak ve bunları 3D bir ağa çevirerek, sanatçılara gerçekçi ve ilgi çekici ortamlar ve set uzantıları oluşturmak için güçlü bir araç olduğunu kanıtlıyor.
ZoeDepth aracını burada ki linkten Hugging Face alanında deneyebilirsiniz.
Daha fazla oku:
- KIRI Engine ile 3D Gaussian Splatting İlk Kez Android’de
- 3D Animasyon Üretim Hattını Öğrenmek: Öğrencilerin Bir Kısa Filmi
- CGDream: 3D Modellerden Resim Oluşturmak için Yeni Bir AI Uygulaması
- Game Maker Engine: 2D Oyunlarda Ustalaşmak İçin Başlangıç Rehberi
