Руководитель направления ИИ (цифровые аватары)

Ульяновск - приоритетно. Рассмотрим сильных специалистов из других городов на удалённую работу / переезд и компенсация аренды квартиры

О проекте

Создать технологию real-time AI-аватара.

Человек находится перед камерой и управляет системой в реальном времени, а зритель видит другого цифрового человека - с передачей мимики, движений и речи.

Важно: нам не подходит готовый сервис с каталогом аватаров. Необходимо создать собственный рабочий pipeline на базе современных AI-моделей и open-source технологий.

Задачи:

- исследовать и подобрать технологии для real-time face reenactment / face swap / digital human;

- собрать работающий прототип;

- добиться минимальной задержки и стабильной работы в реальном времени;

- настроить передачу мимики, движений и синхронизацию речи;

- организовать вывод через OBS / virtual camera / streaming;

- после запуска технологии сформировать команду и обучить сотрудников работе с системой.

Требования:

- уверенный Python;

- PyTorch / Computer Vision;

- опыт работы с GPU / CUDA;

- опыт обработки видео в реальном времени;

- понимание Face Tracking / Face Reenactment / Pose Estimation;

- OpenCV / FFmpeg;

- способность самостоятельно исследовать и внедрять новые AI-технологии.

Будет большим плюсом: опыт с MuseTalk, LiveTalking, LivePortrait, Wav2Lip, MediaPipe, diffusion models и аналогичными технологиями.

Нам важен практический опыт, а не знание конкретного набора инструментов.

Руководство направлением:

После создания прототипа специалист возглавит направление:

- разработка и совершенствование технологии;

- создание инструкций;

- обучение сотрудников;

- контроль качества;

- постановка технических задач;

- развитие команды.

Условия

250 000-350 000 ₽ на руки, итоговая сумма обсуждается по опыту.

- Ульяновск - приоритетно;

- возможна удалённая работа / переезд;

- высокая степень самостоятельности;

- возможность возглавить новое AI-направление.

В отклике

Напишите, с какими AI / Computer Vision / video / face swap / digital human проектами вы работали.

Если есть GitHub, демо или примеры работ - приложите ссылку.

Дополнительно: кратко опишите, как бы вы построили систему, в которой камера реального человека в реальном времени управляет цифровым человеком.