Назад
обновлено 2 дня назад

Lead Support Engineer (Hadoop)

Формат работы
onsite
Тип работы
fulltime
Грейд
lead
Страна
Russia

Мэтч & Сопровод

Покажет вашу совместимость и напишет письмо

Описание вакансии

Текст:
/
TL;DR
Ведущий инженер по сопровождению (Hadoop): Обеспечение стабильности и работоспособности высоконагруженной аналитической платформы с акцентом на экосистему Hadoop, Apache Airflow и JupyterHub. Фокус на диагностике инцидентов, оптимизации пайплайнов обработки данных и взаимодействии с командами разработки и DevOps.

Локация: Москва, офис.

Компания

Крупнейшая финансовая организация, развивающая высоконагруженные аналитические платформы.

Что делать

  • Мониторинг и поддержка стабильности кластера Hadoop (HDFS, YARN, Hive, Spark).
  • Администрирование Apache Airflow: контроль выполнения DAG-ов, оптимизация расписаний и разбор сбоев.
  • Управление средой JupyterHub, включая настройку ресурсов и поддержку пользователей-аналитиков.
  • Обработка инцидентов и сервисных запросов, эскалация сложных проблем на 3-ю линию.
  • Диагностика сбоев через анализ логов и метрик, участие в плановых работах и патчинге.
  • Актуализация эксплуатационной документации и runbook-ов.

Требования

  • Глубокое понимание архитектуры экосистемы Hadoop и принципов распределенной обработки данных.
  • Опыт работы с Apache Airflow (структура DAG, операторы, отладка задач).
  • Уверенное владение Linux (командная строка, администрирование, анализ логов).
  • Знание Python на уровне чтения и правки скриптов.
  • Уверенное знание SQL.
  • Навыки работы с системами мониторинга и тикет-системами.

Хорошо, если есть

  • Опыт работы с Grafana, Prometheus или Zabbix.
  • Опыт работы с Jira или ServiceNow.

Культура и преимущества

  • Ежегодный пересмотр зарплаты и годовая премия.
  • Расширенный ДМС, льготное страхование для семьи и корпоративная пенсионная программа.
  • Доступ к более чем 400 образовательным программам СберУниверситета.
  • Льготная ипотека до 7% для сотрудников.
  • Корпоративный спортзал, зоны отдыха и подписка СберПрайм+.

Будьте осторожны: если работодатель просит войти в их систему, используя iCloud/Google, прислать код/пароль, запустить код/ПО, не делайте этого - это мошенники. Обязательно жмите "Пожаловаться" или пишите в поддержку. Подробнее в гайде →