Эта вакансия в архиве

Посмотреть похожие вакансии ↓
3 дня назад

Data Engineer (Hadoop)

Формат работы
onsite
Тип работы
fulltime
Грейд
junior
Английский
b2
Страна
Russia

Описание вакансии

Текст:
/
TL;DR
Data Engineer (Hadoop): Сопровождение и развитие корпоративной аналитической платформы Сбербанка на базе Hadoop, Kubernetes и сервисов Spark, Kafka и Hive с акцентом на решение инцидентов, производительность и доступность данных. Focus on анализе причин сбоев, локализации дефектов, интеграциях через REST API и взаимодействии с разработчиками, бизнесом и второй линией.

Локация: Москва, офис работодателя — БЦ Даниловский форт, рядом с метро Тульская и Верхние котлы.

Компания

SberData — департамент по управлению данными Сбербанка, развивающий централизованное хранилище данных — Корпоративную аналитическую платформу объемом более 100 ПБ.

Что делать

  • Разбирать и решать инциденты на платформах и сервисах Spark, Kafka, Hive и Kubernetes.
  • Анализировать причины проблем, разрабатывать предиктивные меры и корректирующие действия.
  • Исследовать поведение систем, локализовывать дефекты и сопровождать установку патчей.
  • Взаимодействовать с разработчиками, бизнесом и второй линией поддержки.
  • Участвовать в приемо-сдаточных испытаниях прикладного программного обеспечения.
  • Консультировать бизнес-пользователей и вторую линию по вопросам работы с платформой.

Требования

  • Опыт работы Data Engineer или Support Engineer от 1,5 лет.
  • Уверенное владение SQL.
  • Опыт работы с СУБД Oracle, PostgreSQL или Teradata.
  • Знание клиент-серверных и микросервисных архитектур.
  • Понимание принципов построения интеграций через REST API.
  • Английский язык для чтения технической документации.

Хорошо, если есть

  • Опыт работы с Hadoop, Apache Hive, Spark и Kafka.
  • Знание Python для написания скриптов автоматизации.
  • Опыт создания дашбордов мониторинга в Grafana и Prometheus.
  • Опыт работы с Jira и Confluence.
  • Владение PSQL.
  • Понимание принципов функционирования хранилищ данных OLTP/DWH и систем хранения.

Культура и преимущества

  • Работа в офисе по полному графику.
  • Ежегодный пересмотр зарплаты и годовая премия.
  • Корпоративный спортзал и зоны отдыха.
  • Более 400 образовательных программ СберУниверситета для профессионального и карьерного развития.
  • Расширенный ДМС, льготное страхование для семьи и корпоративная пенсионная программа.
  • Льготные финансовые и корпоративные программы, включая ипотечный дисконт, подписку Прайм и вознаграждение за рекомендации.