3 дня назад
Data Engineer (Scala)
hhВакансия с HeadHunter. Контакт ведёт на hh.ru
Мэтч & Сопровод
Покажет вашу совместимость и напишет письмо
Описание вакансии
Текст:
TL;DR
Data Engineer (Scala): Разработка и оптимизация ETL-процессов для обработки огромных массивов фискальных данных с акцентом на использование Apache Spark и Scala. Фокус на проектировании витрин данных, развитии BigData-инфраструктуры и промышленном внедрении ML-моделей.
Локация: Россия (Оформление по ТК РФ)
Компания
Крупнейший в России оператор фискальных данных, создающий сервисы для предпринимателей и анализирующий рынок ритейла на основе данных из чеков.
Что делать
- Разрабатывать ETL-процессы с использованием библиотеки Apache Spark на Scala.
- Анализировать, проектировать и создавать витрины данных под требования конкретных проектов.
- Развивать инфраструктуру для обработки больших данных и кодовую базу Scala.
- Внедрять математические алгоритмы и ML-модели в промышленные процессы совместно с командой Data Science.
Требования
- Опыт от 1 года в области сбора, хранения и анализа данных.
- Уверенное владение языком программирования Scala.
- Отличное знание SQL.
- Практический опыт работы с инструментами BigData: Airflow, Hadoop, Spark, Hive, Zeppelin.
Хорошо, если есть
- Опыт работы с Docker и Kubernetes (k8s).
Культура и преимущества
- Оформление строго по ТК РФ, «белая» заработная плата.
- ДМС с госпитализацией, скорой помощью и стоматологией.
- Комфортный офис с удобной кухней и релакс-зоной (массажное кресло, приставка, караоке).
- Корпоративные праздники и пицца-пати за счет компании.
Будьте осторожны: если работодатель просит войти в их систему, используя iCloud/Google, прислать код/пароль, запустить код/ПО, не делайте этого - это мошенники. Обязательно жмите "Пожаловаться" или пишите в поддержку. Подробнее в гайде →