API ВЕГА

Создаёт talking-head и lip-sync видео через RunComfy CLI: по портрету и аудиофайлу оживляет лицо, а по текстовому сценарию может сгенерировать речь вместе с видео. Навык выбирает модель по исходным материалам и задаче — от UGC-ролика до кинематографичного монолога.

Возможности

  • Подбирает один из пяти маршрутов: OmniHuman, HappyHorse 1.0, Seedance v2 Pro, Wan 2-7 или Wan 2-2 Animate.
  • Для OmniHuman использует портрет и аудио, чтобы создать видео с речью, пением или жестами.
  • Для HappyHorse 1.0 создаёт речь из текста в prompt — внешний аудиофайл не нужен.
  • Для Wan 2-7 передаёт аудио через audio_url, а prompt использует для описания сцены.
  • Для Seedance v2 Pro объединяет до 9 reference images, 3 reference videos и 3 reference audio tracks.

Когда использовать

  • Нужно озвучить портрет готовым voiceover или сделать виртуального ведущего.
  • Есть сценарий, но нет аудиофайла: подойдёт HappyHorse 1.0.
  • Нужно синхронизировать конкретный MP3 с персонажем или сценой.
  • Требуется анимировать иллюстрированного персонажа или собрать кинематографичный монолог с референсами.

Установка

npx skills add agentspace-so/runcomfy-agent-skills --skill ai-avatar-video -g

Примеры

OmniHuman: портрет и аудиофайл для видео с говорящим персонажем.

runcomfy run bytedance/omnihuman/api \
  --input '{
    "image_url": "https://your-cdn.example/presenter.jpg",
    "audio_url": "https://your-cdn.example/voiceover.mp3"
  }' \
  --output-dir ./out

HappyHorse 1.0: talking-head видео из текстового сценария.

runcomfy run happyhorse/happyhorse-1-0/text-to-video \
  --input '{
    "prompt": "A woman in her 30s, confident expression, looks at the camera and says clearly: \"Welcome to our product demo. Today we are going to show you three things.\" Soft daylight, neutral background.",
    "duration": 6,
    "aspect_ratio": "9:16",
    "resolution": "1080p"
  }' \
  --output-dir ./out

Wan 2-7: описание сцены и аудио для синхронизации губ.

runcomfy run wan-ai/wan-2-7/text-to-video \
  --input '{
    "prompt": "Studio portrait of a woman in her 30s, confident expression, soft window light, neutral gray background.",
    "audio_url": "https://your-cdn.example/voiceover.mp3",
    "duration": 8
  }' \
  --output-dir ./out

Установка

npx skills add https://github.com/prime-skills/runcomfy-agent-skills --skill ai-avatar-video