DataOps Engineer (Data Platform)

Локация: удалённо из любого города России; можно работать в офисах в Москве, Санкт-Петербурге или Новосибирске.

Компания

2GIS развивает корпоративную дата-платформу нового поколения для инженерных команд.

Что делать

• Поддерживать и развивать инфраструктуру дата-платформы на базе HDFS, Spark, ClickHouse, Airflow и других компонентов.
• Запускать и эксплуатировать Ceph-кластер с высокими требованиями к SLA.
• Участвовать в миграции на Lakehouse-стек: S3/Ceph, Iceberg, Trino/StarRocks и Alluxio.
• Сопровождать Kubernetes-инфраструктуру, помогать разработчикам с нетривиальными случаями, Helm-чартами, деплоем и базовым мониторингом.
• Развивать мониторинг и алертинг, участвовать в разборе инцидентов на критичных компонентах платформы.
• Взаимодействовать с NOC по сетевым вопросам.

Требования

• Опыт работы DevOps/SRE/DataOps от уровня Middle и выше.
• Опыт эксплуатации Ceph в продакшене от 2 лет.
• Уверенный опыт эксплуатации Kubernetes в продакшене, включая понимание сетей, storage и операторов.
• Опыт эксплуатации хотя бы части дата-стека: Kafka, Spark, ClickHouse или Airflow.
• Опыт работы с мониторингом и алертингом: Prometheus и Grafana.
• Уверенное администрирование Linux.
• Базовое понимание сетей для предметного взаимодействия с сетевыми специалистами.

Хорошо, если есть

• Опыт работы с Apache Flink.
• Опыт работы в командах дата-платформы.

Культура и преимущества

• Участие в создании дата-платформы с нуля — от архитектуры до продакшена.
• Влияние на технологический курс компании и работа с Ceph, Spark 3+, Kafka, S3, ClickHouse, Iceberg, Trino/StarRocks и Flink.
• Решение задач масштабируемости, отказоустойчивости и миграций без даунтайма.
• Команда самостоятельно принимает инженерные решения, избавляется от легаси и поддерживает понятную архитектуру и human-friendly документацию.
• Белая зарплата, ДМС, медицинские специалисты и другие IT-бонусы.
• Поддержка участия в конференциях и публикациях.