Data Engineer (RecSys)

Локация: Москва, Верхние Котлы; удалённый формат работы

Компания

Okko IT развивает data-driven-платформу для аналитики, A/B-экспериментов и рекомендательных ML-моделей.

Что делать

• Поддерживать и разрабатывать batch ETL-пайплайны на Airflow для аналитических витрин и ML.
• Развивать потоковую обработку данных с использованием Spark Streaming, Kafka и MongoDB.
• Развивать feature-store, наполнять его фичами и интегрировать данные для ML-моделей.
• Документировать, оптимизировать и мониторить пайплайны и потоки данных.

Требования

• Уверенное знание Python и SQL.
• Опыт построения ETL-процессов с использованием Airflow, Spark, Kafka, MongoDB, ClickHouse, Hive, S3 или DataHub.
• Готовность работать с batch- и streaming-обработкой данных.
• Базовые знания ML, включая обучение и инференс моделей, будут плюсом.

Хорошо, если есть

• Опыт работы с CI/CD, Docker и Grafana.
• Опыт работы с feature-store.

Культура и преимущества

• Официальное трудоустройство.
• Оборудование и программное обеспечение для работы.
• ДМС со стоматологией, офисный врач и доплата больничного листа.
• Льготные условия ипотеки в рамках зарплатного проекта.
• Корпоративный спорт, скидки у партнёров, подписка на сервисы и электронная библиотека МИФ.