Это хорошо описанный прикладной AI-проект, где можно влиять на технический подход, но пока обозначен лишь этап прототипа, а дальнейший план развития не определён.
Актуальный стек
Полный цикл работы
?Проект на старте
Прикладной AI
Мэтч & Сопровод
Покажет вашу совместимость и напишет письмо
Создать профиль и узнать мэтч
Описание вакансии
Текст:
Hirify AI/Оригинал
TL;DR
ML-инженер / AI Research Engineer — анализ музыки и генерация видео (Python/PyTorch/генеративные модели): разработка ИИ-системы для анализа музыкальных событий и генерации редактируемых световых последовательностей по аудио, видео, тексту и конфигурации сцены с акцентом на прикладное машинное обучение, временные последовательности и мультимодальные данные. Focus on подготовке датасетов, обучении моделей на авторских примерах, оценке художественного качества и интеграции прототипа с программным обеспечением управления светом.
Локация: Москва, работа в офисе компании; позднее возможен гибридный формат
Компания
Группа компаний «Боронд» проектирует, строит и реконструирует фонтаны в России, а также разрабатывает программное обеспечение для светомузыкальных шоу и управления оборудованием по протоколу DMX512.
Что делать
Разработать архитектуру ИИ-решения для анализа музыки и генерации световой динамики на основе примеров работы художника по свету.
Создать систему разметки музыкальных событий: ударов, ритмических акцентов, переходов, пауз, начала частей и кульминаций.
Разработать модель или комбинацию моделей для генерации световых последовательностей по музыкальному фрагменту, промпту, конфигурации сцены и примерам готовых шоу.
Подготовить и синхронизировать датасет из музыки, маркеров, световых последовательностей и описаний сцены; сравнить готовые модели, дообучение и собственные компоненты.
Обеспечить редактируемость результата, воспроизводимость обучения, сохранение моделей и документирование решения.
Интегрировать модель с программным обеспечением через API или другой согласованный механизм и организовать оценку качества совместно с художником по свету.
Требования
Более 6 лет опыта и подтверждённый опыт решения нестандартных задач в прикладном машинном обучении.
Практический опыт обучения или дообучения ML-моделей на собственных данных.
Уверенное владение Python и PyTorch либо сопоставимым ML-стеком.
Опыт работы с аудиоданными и временными последовательностями.
Понимание условной генерации и объединения видео, аудио, текста и структурированных описаний объектов.
Опыт подготовки датасетов, постановки экспериментов и проверки качества на данных, не участвовавших в обучении.
Умение доводить исследовательский прототип до компонента, пригодного для интеграции в продукт.
Способность обсуждать художественные критерии с постановщиком и переводить их в требования к данным и алгоритмам.
Примеры выполненных проектов с описанием своей роли и полученных результатов.
Хорошо, если есть
Опыт в Music Information Retrieval: анализ ритма, атак звука, музыкальной структуры и инструментальных партий.
Проекты в генерации анимации, движения, визуальных эффектов или сценического света.
Знакомство с обучением на демонстрациях и предпочтениях пользователей.
Опыт разработки инструментов для творческих специалистов.
Культура и преимущества
Официальное трудоустройство и стабильная белая зарплата.
График 5/2, выходные — суббота и воскресенье.
Сначала работа в офисе, затем возможность гибридного формата.
Участие в уникальных проектах федерального уровня.
Профессиональное развитие и обучение за счёт компании, поддержка наставников и работа с командой экспертов.
Процесс найма
В отклике кратко опишите релевантные проекты, свою роль, опыт работы с аудио и генеративными моделями.
Приложите ссылки на портфолио, демонстрации, публикации или репозитории, если они доступны.
Первый этап проекта включает аудит данных и рабочий прототип на ограниченном наборе музыкальных примеров и одной описанной конфигурации сцены.
Будьте осторожны
Если работодатель просит войти в их систему, используя iCloud/Google, прислать код/пароль, запустить код/ПО, не делайте этого. Это мошенники. Обязательно жмите «Пожаловаться» или пишите в поддержку. Подробнее в гайде →