Senior Data Engineer (ML)

TL;DR

Senior Data Engineer (ML): Разработка и оптимизация пайплайнов автоматизированного контроля качества данных с использованием ML-моделей с акцентом на выявление аномалий и дрейфа данных. Фокус на создании прототипов моделей, их интеграции в ETL-процессы и настройке систем алертинга для операционных команд.

Локация: Москва (м. Технопарк), Гибрид

Зарплата: от 250 000 ₽/мес до налогов

Компания

Один из крупнейших банков страны.

Что делать

• Разработка пайплайнов для автоматизированного контроля качества данных на основе ML-моделей.
• Создание и валидация прототипов моделей для выявления аномалий, дрейфа данных и нарушений бизнес-правил.
• Интеграция моделей в существующие ETL-процессы с обеспечением версионирования и возможности быстрого переобучения.
• Настройка систем алертинга на основе прогнозов моделей, включая управление порогами чувствительности.
• Сопровождение решений в production, анализ причин ошибок и актуализация моделей.

Требования

• Продвинутый SQL (оконные функции, оптимизация производительности) и опыт работы с Oracle, PostgreSQL, Greenplum.
• Опыт работы с Airflow для планирования и мониторинга рабочих процессов обработки данных.
• Владение Python (pandas, NumPy, scikit-learn) для разработки ML-моделей и аналитики.
• Опыт разработки классических ML-моделей (линейные, деревья, бустинги) и знание метрик оценки качества.
• Понимание методов математической статистики и опыт аналитической работы с данными.

Хорошо, если есть

• Опыт работы с PySpark.

Культура и преимущества

• Стабильная работа в крупнейшем банке с сильным DE-комьюнити и разнообразными активностями.
• Конкурентная заработная плата, квартальные бонусы и полный соцпакет.
• ДМС и страхование жизни.
• Возможности для роста: конференции, тренинги и внутренние программы развития.
• Работа с передовым стеком технологий и высокопроизводительным оборудованием.
• Специальная программа развития AI-грамотности (от базового до продвинутого уровня).