Hallo

Ne işe yarar?

Hallo, tek bir portre fotoğrafı ile ses kaydını birleştirerek gerçekçi konuşma videoları üreten bir yapay zekâ modelidir. Hiyerarşik ses yönlendirmeli görsel sentez tekniğiyle dudak hareketlerini, yüz mimiklerini ve kafa hareketlerini sesle senkronize eder. Kullanıcılar Hugging Face demosu, ComfyUI eklentisi veya Web arayüzü gibi farklı topluluk araçlarıyla modeli deneyimleyebilir. Fudan Üniversitesi ve Baidu araştırmacıları tarafından açık kaynaklı olarak geliştirilmiştir.

Neler için kullanılabilir?

• Hareketsiz bir portre fotoğrafını ses dosyasıyla konuşturarak animasyon video hazırlamak
• ComfyUI veya Web arayüzü üzerinden konuşan avatar videoları üretmek
• Metinden ses üreten araçlarla birlikte otomatik sunucu videoları oluşturmak

Nasıl kullanılır?

1. Gradio veya Hugging Face Spaces üzerindeki demoyu açın.
2. Bir portre görseli ile konuşma ses dosyasını yükleyin.
3. Çıkarım adımını çalıştırarak konuşan portre videosunu oluşturun.

Adımlar deponun README'sinden özetlendi; güncel kurulum için deponun kendi sayfasına bakın.

Kimler için?

Fotoğrafları sesle canlandırıp konuşan video animasyonları oluşturmak isteyen içerik üreticileri ve araştırmacılar.

Aynı kategoriden

• ComfyUI (138K) Düğüm tabanlı arayüzüyle görsel ve video üreten modüler yapay zekâ motoru.
• MoneyPrinterTurbo Belirtilen konudan otomatik olarak senaryolu, sesli ve altyazılı kısa video üretir.
• OpenCut Web, masaüstü ve mobilde çalışan açık kaynaklı bir video düzenleme uygulamasıdır.
• OpenMontage Yapay zekâ kodlama asistanlarını tam teşekküllü bir video üretim stüdyosuna dönüştürür.
• photocraft Rust ile yazılmış, Photoshop benzeri açık kaynaklı katmanlı görsel düzenleyicidir.
• remotion React ve programlama dilleriyle kod üzerinden otomatik video oluşturma kütüphanesidir.