LivePortrait je jeden z nejpoužívanějších open-source projektů pro animaci portrétů — výzkumný model, který vezme jediný statický portrét a oživí ho tím, že na obličej přenese výraz a pohyb hlavy z řídicího videa. Pokud na něj narážíte stále častěji a chcete srozumitelnou odpověď na to, co LivePortrait je, jak ho spustit a zda může nahradit hostované nástroje pro mluvící avatary, tento průvodce vám to vysvětlí. Zdrojový projekt: github.com/KwaiVGI/LivePortrait.
Co je LivePortrait?
LivePortrait je efektivní framework pro animaci portrétu. Když mu dáte jeden zdrojový obrázek obličeje a řídicí signál — obvykle krátké video někoho, kdo se hýbe a mluví — vytvoří nové video, ve kterém zdrojový portrét tento pohyb zrcadlí, včetně jemných výrazů a pohybů očí a rtů. Je známý tím, že je rychlý a dobře ovladatelný ve srovnání s těžšími přístupy založenými na difuzi.
Klíčové je pochopit: LivePortrait je nástroj pro vývojáře, ne hostovaný web. Neexistuje žádná stránka pro registraci ani aplikace v prohlížeči. Nainstalujete si ho lokálně v Pythonu a spouštíte z příkazové řádky nebo přes demo rozhraní. To z něj dělá flexibilní řešení a jeho spuštění je zdarma, ale zároveň to znamená skutečné nastavování a potřebu výkonné GPU.
Jak spustit LivePortrait
LivePortrait běží lokálně, takže před první animací budete potřebovat pár předpokladů.
Požadavky
- Počítač s NVIDIA GPU (jen CPU je možné, ale pomalé).
- Python a správce balíčků, například conda.
- Git pro naklonování repozitáře a stažení vah modelu.
Nastavení
- Naklonujte repozitář z oficiálního projektu na GitHubu a nainstalujte závislosti pro Python.
- Stáhněte předtrénované váhy podle pokynů v README projektu.
- Spusťte inferenci se svým zdrojovým portrétem a řídicím videem a vygenerujte animovaný výsledek, nebo spusťte přiložené demo rozhraní.
Protože jde o výzkumný projekt, počítejte s tím, že napoprvé si budete číst README a Issues a že si budete spravovat vlastní prostředí i aktualizace.
LivePortrait vs hostovaný nástroj pro mluvící avatary
LivePortrait a hostované nástroje pro avatary řeší jiné potřeby.
- Zvolte LivePortrait, pokud vám nevadí Python a GPU, chcete kontrolu nad animací na úrovni výzkumu a dáváte přednost bezplatné, self-hosted variantě před rychlostí.
- Zvolte hostovaný nástroj, pokud chcete hotové mluvící video rychle a bez nastavování. VisionStory promění jedinou fotku a scénář na mluvící video s lip-syncem přímo ve vašem prohlížeči během pár minut — bez Pythonu, bez GPU, bez nahrávání řídicího videa.
Pokud je vaším cílem mluvící moderátor z jedné fotky a scénáře, hostovaný nástroj na avatary je obvykle rychlejší cesta. Podívejte se, jak to funguje v tvorbě AI videa, nebo si pro srovnání rychle vytvořte mluvící fotku.
Chcete mluvící video bez instalace čehokoli? Vyzkoušejte VisionStory zdarma — nahrajte fotku, napište scénář a během pár minut získáte sdílené mluvící video s avatarem.