Аналитик ИИ-продуктов

Локация: Москва (Мнёвники); доступен гибридный или удалённый формат работы.

Зарплата: 250 000–350 000 ₽/мес на руки.

Компания

БЮРО 1440 развивает ИИ-продукты и решения.

Что делать

• Разрабатывать методику оценки качества AI-решений, определять метрики, целевые пороги и согласовывать их с заказчиками и руководителем AI-продуктов.
• Формировать бенчмарк-наборы данных, запускать регрессионное тестирование версий пайплайна и фиксировать деградации показателей.
• Обеспечивать качество эталонных датасетов, организовывать разметку и развивать эталонные выборки через active learning.
• Анализировать ошибки моделей, готовить диагностические отчёты и передавать выводы команде разработки.
• Переводить технические метрики в бизнес-эффекты, готовить материалы для защиты направления и обоснования инвестиций.
• Совместно с руководителем AI-продуктов формировать измеримые критерии готовности решения к внедрению в продакшен.

Требования

• Коммерческий опыт в аналитике данных, ML-аналитике или data science от 3 лет.
• Практический опыт определения и валидации метрик качества в задачах без готовых метрик.
• Навыки самостоятельной работы с датасетами: сбор, очистка, разметка, анализ и подготовка данных.
• Уверенное владение SQL и Python на рабочем уровне для повседневных аналитических задач.
• Опыт построения бенчмарков и расчёта метрик качества и ранжирования.
• Понимание архитектуры LLM и RAG-пайплайнов, а также факторов, влияющих на качество ответов.
• Навыки презентации результатов и объяснения технических метрик нетехническим стейкхолдерам.

Хорошо, если есть

• Опыт решения задач информационного поиска, классификации, маппинга или матчинга данных.

Культура и преимущества

• Возможность выбрать гибридный или удалённый формат работы.
• Зарплата 250 000–350 000 ₽ в месяц на руки.