Selfie ile 3D İnsan Modeli Oluşturma

Tencent geliştiricilerinden oluşan bir ekibin Selfie ile 3D insan modeli oluşturma yaklaşımına göz atın.

Tencent’ten bir araştırma ekibi kısa süre önce, tüketici düzeyinde bir RGB-D selfie kamerası kullanarak yüksek kaliteli, fotogerçekçi 3D dijital insan karakterleri oluşturmaya izin veren tam otomatik bir sistem sundu.

Sistem, 30 saniyeden daha kısa sürede yüksek kaliteli bir yeniden yapılandırma oluşturmak için kısa selfie RGB-D videoları kullanıyor (videoyu kaydederken başınızı döndürmeniz gerekir).

“Ana katkımız, son teknolojiyi önemli ölçüde iyileştiren yeni bir yüz geometrisi modelleme ve yansıtma sentezi prosedürüdür. Özellikle, giriş videosu göz önüne alındığında, iki aşamalı bir çerçeve seçim algoritması ilk olarak birkaç yüksek kaliteli kare seçmek için kullanılır “diye yazdı ekip.” Daha sonra, yüz geometrilerini çok görüntülü RGB-D verilerinden kurtarmak için yeni, farklılaştırılabilir oluşturucu tabanlı 3D Morphable Model (3DMM) yerleştirme yöntemi uygulandı ve bu da kapsamlı veri oluşturma için kullanıldı.” diye ekledi.

Ekip, 3DMM’lerinin geleneksel 3DMM ile karşılaştırıldığında çok daha büyük ifade kapasiteleri sunduğunu belirtiyor. Bu, kullanıcıların doğrusal tabanları kullanarak daha doğru yüz geometrisini kurtarabileceği anlamına geliyor. Ekip, yansıma sentezine gelince, gerçekçi saç, gözenek, kırışıklık ayrıntılarıyla yüksek çözünürlüklü albedo veya normal haritalar oluşturmak için parametrik hibrit bir yaklaşım kullandı.

Kod ve oluşturulan 3DMM kullanımı herkese açıktır. Makalenin tamamını buradan ulaşabilirsiniz.

Detayları

Ekibin amacı, tüketicilere RGB-D selfie kamerası ile yüksek kaliteli, foto-gerçekçi 3D dijital insan karakterleri üretebilen tam otomatik bir sistem sunmak.

Gerçekçi dijital insanların gerçek zamanlı oluşturulması, artırılmış ve sanal gerçeklik (AR / VR) gibi çeşitli sürükleyici uygulamalarda giderek daha önemli hale gelen bir görevdir. Gerçekçi bir insan yüzü oluşturmak için, yüksek kaliteli geometri ve yansıtma verileri gereklidir. Film endüstrisinde yüksek kaliteli 3D yüzlerin yakalanması ve yeniden yapılandırılması için Light Stage gibi özel donanımlar mevcuttur, ancak tüketiciler için kullanımı zahmetlidir.

okumaya devam et:

• iPad Pro ile Yüksek kaliteli 3D Tarama Yapmak | Lidar Sensörü
• Cep Telefonu ile 3D tarama nasıl yapılır?
• 23 Ücretsiz 3D Model İndir