Назад

ML-инженер / AI Research Engineer — анализ музыки и генерация видео

Формат работы
onsite/hybrid
Тип работы
fulltime
Грейд
senior
Страна
Russia
hhВакансия с HeadHunter. Контакт ведёт на hh.ru

Мэтч & Сопровод

Покажет вашу совместимость и напишет письмо

Описание вакансии

Текст:
/
TL;DR
ML-инженер / AI Research Engineer — анализ музыки и генерация видео (Python/PyTorch/генеративные модели): разработка ИИ-системы для анализа музыкальных событий и генерации редактируемых световых последовательностей по аудио, видео, тексту и конфигурации сцены с акцентом на прикладное машинное обучение, временные последовательности и мультимодальные данные. Focus on подготовке датасетов, обучении моделей на авторских примерах, оценке художественного качества и интеграции прототипа с программным обеспечением управления светом.

Локация: Москва, работа в офисе компании; позднее возможен гибридный формат

Компания

Группа компаний «Боронд» проектирует, строит и реконструирует фонтаны в России, а также разрабатывает программное обеспечение для светомузыкальных шоу и управления оборудованием по протоколу DMX512.

Что делать

  • Разработать архитектуру ИИ-решения для анализа музыки и генерации световой динамики на основе примеров работы художника по свету.
  • Создать систему разметки музыкальных событий: ударов, ритмических акцентов, переходов, пауз, начала частей и кульминаций.
  • Разработать модель или комбинацию моделей для генерации световых последовательностей по музыкальному фрагменту, промпту, конфигурации сцены и примерам готовых шоу.
  • Подготовить и синхронизировать датасет из музыки, маркеров, световых последовательностей и описаний сцены; сравнить готовые модели, дообучение и собственные компоненты.
  • Обеспечить редактируемость результата, воспроизводимость обучения, сохранение моделей и документирование решения.
  • Интегрировать модель с программным обеспечением через API или другой согласованный механизм и организовать оценку качества совместно с художником по свету.

Требования

  • Более 6 лет опыта и подтверждённый опыт решения нестандартных задач в прикладном машинном обучении.
  • Практический опыт обучения или дообучения ML-моделей на собственных данных.
  • Уверенное владение Python и PyTorch либо сопоставимым ML-стеком.
  • Опыт работы с аудиоданными и временными последовательностями.
  • Понимание условной генерации и объединения видео, аудио, текста и структурированных описаний объектов.
  • Опыт подготовки датасетов, постановки экспериментов и проверки качества на данных, не участвовавших в обучении.
  • Умение доводить исследовательский прототип до компонента, пригодного для интеграции в продукт.
  • Способность обсуждать художественные критерии с постановщиком и переводить их в требования к данным и алгоритмам.
  • Примеры выполненных проектов с описанием своей роли и полученных результатов.

Хорошо, если есть

  • Опыт в Music Information Retrieval: анализ ритма, атак звука, музыкальной структуры и инструментальных партий.
  • Проекты в генерации анимации, движения, визуальных эффектов или сценического света.
  • Знакомство с обучением на демонстрациях и предпочтениях пользователей.
  • Опыт разработки инструментов для творческих специалистов.

Культура и преимущества

  • Официальное трудоустройство и стабильная белая зарплата.
  • График 5/2, выходные — суббота и воскресенье.
  • Сначала работа в офисе, затем возможность гибридного формата.
  • Участие в уникальных проектах федерального уровня.
  • Профессиональное развитие и обучение за счёт компании, поддержка наставников и работа с командой экспертов.

Процесс найма

  • В отклике кратко опишите релевантные проекты, свою роль, опыт работы с аудио и генеративными моделями.
  • Приложите ссылки на портфолио, демонстрации, публикации или репозитории, если они доступны.
  • Первый этап проекта включает аудит данных и рабочий прототип на ограниченном наборе музыкальных примеров и одной описанной конфигурации сцены.

Будьте осторожны

Если работодатель просит войти в их систему, используя iCloud/Google, прислать код/пароль, запустить код/ПО, не делайте этого. Это мошенники. Обязательно жмите «Пожаловаться» или пишите в поддержку. Подробнее в гайде →