Нов безплатен инструмент позволява генерирането на реалистични говорещи аватари

Hedra, нов стартъп за изкуствен интелект, представи първия си AI инструмент, който позволява генерирането на видеоклипове с говорещи аватари въз основа на портретни изображения.

Introducing the research preview of our foundation model, Character-1. Available today at https://t.co/G45zFlUfcN (on desktop and mobile).

* Infinite duration (30s for open preview)
* 90s generated per 60s (if our H100 supply holds)
* Expressive talking, singing, rapping… pic.twitter.com/cYuHpSnqMu

— Hedra (@hedra_labs) June 18, 2024

Принципът за работа с Hedra е сравнително лесен. Първо, трябва да качите портретно изображение, съдържащо човешко лице – било то реална фотография, илюстрация или генерирано от изкуствен интелект. След което трябва да въведете желания текст или аудио, които искате аватарът да произнесе.

За няколко секунди Hedra анимира лицето на персонажа, синхронизирайки движенията на устните с въведения текст или аудио, а крайният резултат е говорещ аватар с изразително лице и реалистични движения. Интересното е, че за разлика от други подобни инструменти, този работи сравнително добре на български език.

Инструментът е в бета версия и всеки, който желае, може да го изпробва безплатно на адрес: https://www.hedra.com.

Въпреки че генерираните видеоклипове не са перфектни и си личи, че са генерирани с изкуствен интелект, инструментът не остана незабелязан в социалните мрежи. Много потребителите му дадоха висока оценка, а някои от тях дори го комбинираха с други AI инструменти като ElevenLabs и Dream Machine на Luma AI за създаване на интересни кратки видеоклипове.

I used @hedra_labs, @LumaLabsAI, and @elevenlabsio to create a quick fan-made Superman short! 🎬

Love how realistic it made it feel with the lip sync, and those clips took just under a minute to generate! pic.twitter.com/gynPMu32qN

— Ammaar Reshi (@ammaar) June 18, 2024

Meet my mate Dave, he has a belated father’s day message for everyone, sound on please. I made Dave on father’s day with just a midjourney image, an eleven labs voice2voice voice and a new tool called HEDRA @hedra_labs .This is the closest thing to acting that I’ve seen from an… pic.twitter.com/RRT0rovnSH

— Uncanny Harry AI (@Uncanny_Harry) June 18, 2024

Последвайте ни в социалните мрежи – Facebook, Instagram, X и LinkedIn!