ZamaRig

Problem

3D bir karakteri animasyona hazırlamak (riglemek), deneyimli bir sanatçının bile 2–8 saatini alan, elle kemik yerleştirme ve ağırlık boyama işidir. ZamaRig bu süreci tek tıka indiriyor.

Nasıl çalışıyor

• Yükleme: .obj ya da .fbx model sunucuya gönderiliyor.
• Çok açılı render: Blender arka planda modeli ortalayıp 4–6 açıdan render ediyor.
• Sınıflandırma: Transfer learning ile eğittiğim EfficientNetB0 modeli, modelin insan mı dört ayaklı mı olduğunu güven skoruyla belirliyor.
• İskelet: Uygun şablon modelin ölçülerine göre yerleşiyor. A-poz ve T-poz algılanıyor; parmak, omurga ve kuyruk kemikleri özel olarak ele alınıyor.
• Ağırlık boyama: Eklemlerde doğal bükülme için mesafe tabanlı (geodesic) ağırlıklar hesaplanıyor.
• Dışa aktarma: Riglenmiş model tarayıcıda önizleniyor ve FBX olarak indiriliyor.

Sonuçlar

• Daha önce görmediği 320 render üzerinde 0.99 F1 skoru
• Sınıflandırma 2 saniyenin altında
• Uçtan uca riglama 5–15 saniye (elle 2–8 saat)

Tanıtım sayfası

3D tarafını öne çıkardım: kaydırmayla oynayan model animasyonu, modeller arasında shader ile "erime" geçişi, iskelet görselleştirmesi ve akıcı kaydırma.

Not

Tanıtım sayfası yayında. Rigleme motoru Blender ve TensorFlow gerektirdiği için yerel kurulumla çalışıyor; kurulum adımları GitHub'da.