Экосистема KlingИзучите встроенное аудио, видео из нескольких кадров и управление движениемПосмотреть модели

Генератор говорящих аватаров OmniHuman 2.0: реалистичные видео до 5 минут

OmniHuman 2.0 — ИИ-модель видео, управляемая звуком: из одного изображения и одного аудио она создаёт реалистичное видео с говорящим аватаром, естественной синхронизацией губ, выразительной мимикой, жестами и длиной до 5 минут.

Изображение + аудио в видео · 720p · 4–300 секунд · промпт по желанию

OmniHuman 2.0: изображение и аудио в видео

Один сценарий: загрузите портрет, добавьте речь или пение и при желании опишите игру.

Говорящий аватар OmniHuman 2.0

Загрузите портрет и 4–300 секунд аудио MP3 или WAV. Видео 720p совпадает по длине с аудио. Добавьте промпт до 300 символов, чтобы задать жесты и камеру.

Открыть рабочее пространство

Возможности OmniHuman 2.0

OmniHuman 2.0 превращает изображение и ваше аудио в говорящее видео с естественной синхронизацией губ, мимикой и жестами.

Превратите фото и аудио в говорящее видео с OmniHuman 2.0

Превратите одно изображение и аудиофайл в реалистичное видео с говорящим аватаром в OmniHuman 2.0. Модель оживляет персонажей: речь, мимика и движения тела управляются звуком. Создавайте ИИ-ведущих, виртуальных персонажей и цифровых аватаров без съёмок. Загрузите фото, иллюстрацию или стилизованного персонажа — лицо, одежда и стиль останутся как на исходном изображении.

  • Нужны только портрет и аудиофайл
  • Речь, мимика и жесты следуют звуку
  • ИИ-ведущие, виртуальные хосты и цифровые люди

Естественная синхронизация губ для речи и пения

OmniHuman 2.0 создаёт говорящие видео, где движения губ точно следуют словам и пению. Рот синхронизирован со звуком, а остальное лицо двигается естественно. Подходит для виртуальных ведущих, поющих аватаров и анимации персонажей по голосу. Синхронизация держится и на крупных планах, и в быстрых текстах песен, поэтому видео с ведущим и музыкальные номера выглядят убедительно на любом экране.

  • Губы совпадают с каждым словом и строкой
  • Подходит и для речи, и для пения
  • Речь на китайском, английском, японском, корейском, испанском и других

Выразительная мимика и жесты

OmniHuman 2.0 выходит за рамки простой синхронизации губ. Модель создаёт мимику, повороты головы, жесты рук и движения тела в ответ на ритм и эмоции звука. Добавьте ИИ-аватарам характера для историй, развлечений и соцсетей. Спокойный рассказ остаётся мягким, а взволнованный голос даёт более широкие жесты и живую мимику.

  • Эмоции голоса видны на лице
  • Повороты головы, жесты и смена позы
  • Живая игра без скованности

Создавайте говорящие видео до 5 минут

OmniHuman 2.0 поддерживает говорящие видео длиной до 300 секунд. Длина ролика следует за аудио — от 4 секунд до 5 минут. Создавайте полные речи, презентации, уроки и песни за один раз, не склеивая короткие фрагменты. Один непрерывный дубль сохраняет лицо, свет и кадр от первого до последнего слова.

  • Аудио от 4 до 300 секунд
  • Длина видео совпадает с аудио
  • Вывод 720p для длинного контента

Оживляйте нескольких людей в одной сцене

OmniHuman 2.0 может оживить нескольких персонажей в одной сцене. Создавайте беседы, интервью и групповые выступления с мимикой по звуку и естественными движениями. Превращайте подкасты и диалоги в увлекательные видео. Используйте групповое фото или сцену с несколькими людьми и оставьте каждому говорящему место в кадре — так результат будет чётче.

  • Беседы, интервью и групповые сцены
  • Каждый участник реагирует естественно
  • Идеально для видеоподкастов

Управляйте игрой текстовым промптом

В OmniHuman 2.0 к изображению и аудио можно добавить необязательный текстовый промпт. Опишите действия, жесты, поведение сцены и движение камеры, чтобы задать результат. Сочетайте анимацию по звуку с промптом для более управляемых видео. Например, напишите «улыбается и машет в камеру, медленный наезд», чтобы начать видео о товаре с дружелюбного приветствия.

  • Необязательный промпт до 300 символов
  • Задавайте жесты, сцену и камеру
  • Подходит для фото, иллюстраций и стилизованных персонажей

Как создать говорящее видео в OmniHuman 2.0

Создайте реалистичное говорящее видео в OmniHuman 2.0 за три шага:

  1. Загрузите портрет

    Войдите и откройте рабочую область OmniHuman 2.0. Загрузите одно чёткое изображение JPG, PNG или WEBP до 30 МБ, 300–6000 px по каждой стороне, с соотношением сторон от 0,4 до 2,5. Подойдут фото, иллюстрации и стилизованные персонажи.

  2. Добавьте аудио и промпт

    Загрузите речь или пение в MP3 или WAV до 15 МБ и длиной от 4 до 300 секунд. Аудио задаёт длину видео. При желании опишите жесты, сцену или движение камеры — до 300 символов.

  3. Создайте и скачайте

    Проверьте расчёт кредитов и запустите генерацию. Видео OmniHuman 2.0 появится в диалоге и в разделе «Мои работы», готовое к просмотру и загрузке.

Попробуйте OmniHuman 2.0
Сравнение моделей

OmniHuman 2.0 и OmniHuman 1.5: более длинные говорящие видео

OmniHuman 2.0 расширяет аватары на основе звука до видео длиной 5 минут — для презентаций, пения и цифровых людей. OmniHuman 1.5 делает короткие ролики с выводом до 1080p. Обе модели поддерживают синхронизацию губ, выразительные жесты и анимацию по промпту.

ВозможностьOmniHuman 2.0До 5 минOmniHuman 1.5
ПозиционированиеДлинные видео с аватаромКороткие ролики высокого разрешения
ВходИзображение + аудио + промптИзображение + аудио + промпт
Анимация по звукуДаДа
Синхронизация губДаДа
МимикаДаДа
Жесты телаДаДа
Анимация нескольких людейДаДа
Управление промптомДаДа
Максимальная длинаДо 300 секундДо 60 секунд
Длина видеоПо длине аудио, 4–300 сПо длине аудио
Разрешение720p720p / 1080p
Лучше всего дляВыступления, курсы, песни и подкастыКороткие ролики с аватаром в высоком разрешении

Частые вопросы об OmniHuman 2.0

Что такое OmniHuman 2.0?

OmniHuman 2.0 — ИИ-модель видео от ByteDance, управляемая звуком. Она превращает изображение персонажа и аудиофайл в видео с говорящим аватаром, где губы, мимика и жесты синхронизированы. Модель работает с фото, иллюстрациями и стилизованными персонажами и создаёт видео до 5 минут в 720p.

Как работает OmniHuman 2.0?

OmniHuman 2.0 анализирует речь, ритм и эмоции в аудио и оживляет изображение: губы, мимика и жесты совпадают со звуком. Необязательный промпт помогает задать действия и камеру. Чистая речь без фонового шума даёт самую точную синхронизацию губ.

Какие изображения и аудио принимает OmniHuman 2.0?

Загрузите одно изображение JPG, PNG или WEBP до 30 МБ, 300–6000 px по стороне, с соотношением от 0,4 до 2,5. Аудио — MP3 или WAV до 15 МБ и длиной 4–300 секунд. Если файл не подходит, окно загрузки укажет точную причину.

Какой длины бывают видео OmniHuman 2.0?

OmniHuman 2.0 создаёт видео от 4 до 300 секунд (5 минут). Длина ролика всегда равна длине аудио, разрешение — 720p.

Сколько кредитов тратит OmniHuman 2.0?

OmniHuman 2.0 тратит 28 кредитов за секунду аудио. Видео на 10 секунд стоит 280 кредитов, на 1 минуту — 1680, на 5 минут — 8400. Точный расчёт появится после добавления аудио. Для OmniHuman 2.0 нужен VIP.

Поддерживает ли OmniHuman 2.0 нескольких людей в кадре?

Да. OmniHuman 2.0 может оживить нескольких людей в одной сцене — это удобно для интервью, подкастов и групповых выступлений. Результат зависит от изображения, аудио и сложности сцены. Для лучшего результата используйте изображение, где все лица хорошо видны и освещены.

Чем OmniHuman 2.0 отличается от OmniHuman 1.5?

OmniHuman 2.0 создаёт более длинные видео — до 300 секунд в 720p, для выступлений, уроков и песен. OmniHuman 1.5 рассчитан на ролики до 60 секунд с разрешением до 1080p. Обе модели дают синхронизацию губ, мимику и жесты по звуку.

Можно ли управлять движениями персонажа в OmniHuman 2.0?

Да. Добавьте необязательный промпт до 300 символов с описанием действий, жестов, сцены или камеры. Промпты работают на китайском, английском, японском, корейском, испанском и индонезийском. Итоговое движение также следует за звуком.

Может ли OmniHuman 2.0 делать видео с пением?

Да. Загрузите песню в MP3 или WAV, и OmniHuman 2.0 синхронизирует губы, дыхание и ритм тела с музыкой. Подходит для виртуальных певцов, цифровых айдолов и клипов до 5 минут.

Что можно создать с OmniHuman 2.0?

OmniHuman 2.0 подходит для ИИ-ведущих, UGC-рекламы товаров, обучающих видео и курсов, видеоподкастов, виртуальных певцов и анимации иллюстраций. Любой портрет и запись голоса станут говорящим видео без съёмок.

Как начать работу с OmniHuman 2.0?

Войдите, активируйте VIP и откройте рабочую область OmniHuman 2.0 с этой страницы. Загрузите портрет и аудио, при желании добавьте промпт и запустите. Без кода и установки программ. Первое говорящее видео будет готово за несколько минут.

Начните создавать с OmniHuman 2.0

Создать
Посмотреть все модели Kling