LivePortrait, en yaygın kullanılan açık kaynak portre animasyonu projelerinden biridir — tek bir durağan portreyi alıp canlandıran; bir yönlendirme videosundaki ifadeyi ve baş hareketini yüze aktaran bir araştırma modeli. Sürekli adını duyuyor ve LivePortrait nedir, nasıl çalıştırılır ve barındırılan konuşan avatar araçlarının yerini alabilir mi sorularına anlaşılır bir yanıt istiyorsanız, bu rehber tam da bunu anlatır. Kaynak proje: github.com/KwaiVGI/LivePortrait.
LivePortrait nedir?
LivePortrait, verimli bir portre animasyonu çerçevesidir. Bir yüzün tek bir kaynak görseli ve bir yönlendirme sinyali — genellikle birinin hareket edip konuştuğu kısa bir video — verildiğinde, kaynak portrenin bu hareketi taklit ettiği; ince mimikler, göz ve dudak hareketleri dahil yeni bir video üretir. Daha ağır difüzyon tabanlı yaklaşımlara kıyasla hızlı ve kontrol edilebilir olmasıyla bilinir.
Anlaşılması gereken kilit nokta şu: LivePortrait barındırılan bir web sitesi değil, geliştirici aracıdır. Kayıt sayfası ya da tarayıcı uygulaması yoktur. Python ile yerel olarak kurar, komut satırından veya bir demo arayüzünden çalıştırırsınız. Bu onu esnek ve çalıştırması ücretsiz kılar; ancak gerçek bir kurulum süreci ve güçlü bir GPU gerektiği anlamına da gelir.
LivePortrait nasıl çalıştırılır
LivePortrait yerel olarak çalışır; bu yüzden ilk animasyonunuzdan önce birkaç ön koşula ihtiyacınız var.
Ön koşullar
- NVIDIA GPU’lu bir bilgisayar (yalnızca CPU ile de mümkün, ancak yavaştır).
- Python ve conda gibi bir paket yöneticisi.
- Depoyu klonlamak ve model ağırlıklarını indirmek için Git.
Kurulum
- Resmi GitHub projesinden depoyu klonlayın ve Python bağımlılıklarını kurun.
- Proje README’sinde anlatıldığı şekilde önceden eğitilmiş ağırlıkları indirin.
- Kaynak portreniz ve bir yönlendirme videosu ile çıkarım çalıştırarak animasyonlu sonucu üretin veya dahil edilen demo arayüzünü başlatın.
Bir araştırma projesi olduğu için, ilk seferde README ve issues bölümünü okumanız ve kendi ortamınızı ile güncellemelerinizi yönetmeniz beklenir.
LivePortrait ve barındırılan konuşan avatar aracı karşılaştırması
LivePortrait ile barındırılan avatar araçları farklı problemleri çözer.
- Şunlar sizin için uygunsa LivePortrait’u seçin: Python ve GPU’larla rahatsanız, animasyon üzerinde araştırma seviyesinde kontrol istiyorsanız ve hız yerine ücretsiz, kendi kendine barındırılan bir yolu tercih ediyorsanız.
- Şunlar sizin için uygunsa barındırılan bir aracı seçin: Kurulum yapmadan hızlıca tamamlanmış bir konuşan video istiyorsanız. VisionStory, tek bir fotoğrafı ve bir metni tarayıcınızda dakikalar içinde dudak senkronlu konuşan avatar videosuna dönüştürür — Python yok, GPU yok, kaydetmeniz gereken bir yönlendirme videosu yok.
Hedefiniz tek bir fotoğraf ve bir metinden konuşan bir sunucu oluşturmaksa, barındırılan bir avatar aracı genellikle daha hızlı yoldur. Nasıl çalıştığını Yapay Zeka Video oluşturma bölümünde görün veya karşılaştırmak için hızlıca bir konuşan fotoğraf oluşturun.
Hiçbir şey kurmadan konuşan bir video mu istiyorsunuz? VisionStory’yi ücretsiz deneyin — bir fotoğraf yükleyin, bir metin yazın ve dakikalar içinde paylaşılabilir bir konuşan avatar videosu alın.