Ведущий инженер по сопровождению (Hadoop)

Локация: Москва, офис

Компания

Сбер развивает высоконагруженную аналитическую платформу и корпоративные сервисы для работы с большими данными.

Что делать

• Мониторить и поддерживать стабильность Hadoop-кластера и компонентов HDFS, YARN, Hive и Spark.
• Сопровождать Apache Airflow: контролировать выполнение DAG-ов, разбирать сбои, перезапускать задачи и оптимизировать расписания.
• Администрировать JupyterHub, управлять доступами, ядрами и ресурсами, помогать пользователям-аналитикам.
• Обрабатывать инциденты и сервисные запросы на первой и второй линиях, вести тикеты и эскалировать вопросы на третью линию или разработку.
• Диагностировать сбои по логам и метрикам, выявлять корневые причины, участвовать в обновлениях и патчинге.
• Поддерживать эксплуатационную документацию, runbook-и и взаимодействие с командами разработки, DevOps, аналитиками и владельцами систем.

Требования

• Понимание архитектуры Hadoop и принципов распределённой обработки данных.
• Опыт работы с Apache Airflow, DAG-ами и операторами.
• Базовые навыки администрирования Jupyter и JupyterHub.
• Уверенное знание SQL и Linux, включая командную строку, базовое администрирование и анализ логов.
• Знание Python на уровне чтения и правки скриптов для анализа пайплайнов и DAG-ов.
• Навыки работы с системами мониторинга и тикет-системами.

Хорошо, если есть

• Опыт работы с Grafana, Prometheus или Zabbix.

Культура и преимущества

• Ежегодный пересмотр зарплаты и годовая премия.
• Корпоративный спортзал и зоны отдыха.
• Более 400 образовательных программ СберУниверситета.
• Расширенный ДМС, льготное страхование для семьи и корпоративная пенсионная программа.
• Льготная ипотека, подписка СберПрайм+ и скидки на продукты компаний-партнёров.
• Вознаграждение за рекомендации сотрудников.