Мэтч & Сопровод
Покажет вашу совместимость и напишет письмо
Описание вакансии
Текст:
TL;DR
Data Engineer (Apache Spark): Разработка ETL/ELT-процессов и аналитическая поддержка данных с акцентом на Apache Spark, Scala, Big Data и оптимизацию SQL-запросов. Focus on проектирование Spec-driven решений, оркестрацию и мониторинг пайплайнов, работу с HDFS, Hive Metastore, YARN и витринами данных.
Локация: Москва, офисный формат работы на месте работодателя
Зарплата: до 424 400 ₽ в месяц до вычета налогов
Компания
СБЕР — крупная финансовая организация с корпоративными программами развития, страхования и пенсионными решениями.
Что делать
- Проектировать решения на основе спецификаций в подходе Spec-driven.
- Разрабатывать ETL/ELT-процессы.
- Настраивать оркестрацию и мониторинг процессов обработки данных.
- Оказывать аналитическую поддержку и участвовать в проектировании витрин данных.
- Поддерживать документацию и взаимодействовать со стейкхолдерами.
Требования
- От 4 лет опыта в ролях Data Engineer, DWH-разработчика или системного аналитика данных.
- Продвинутый SQL: оконные функции, CTE, EXPLAIN и оптимизация запросов.
- Уверенное владение Apache Spark и промышленная разработка на Scala.
- Опыт работы с HDFS, Hive Metastore, YARN и форматами Parquet/ORC.
- Практический опыт с Airflow, Luigi или аналогичными оркестраторами.
- Владение Git, включая GitFlow, код-ревью и разрешение конфликтов.
Хорошо, если есть
- Опыт проектирования витрин данных с нуля под продуктовые метрики.
- Python, Pandas или PySpark для вспомогательных скриптов, тестирования и анализа.
- Начальные знания и интерес к Machine Learning и Data Analysis.
Культура и преимущества
- Полная занятость и офисный формат работы.
- Ежегодный пересмотр зарплаты и годовая премия.
- Более 400 образовательных программ СберУниверситета для профессионального и карьерного развития.
- Расширенный ДМС, льготное страхование семьи и корпоративная пенсионная программа.
- Льготные финансовые условия, подписка Прайм и вознаграждение за рекомендации.
Будьте осторожны: если работодатель просит войти в их систему, используя iCloud/Google, прислать код/пароль, запустить код/ПО, не делайте этого - это мошенники. Обязательно жмите "Пожаловаться" или пишите в поддержку. Подробнее в гайде →