Билайн
Work format
remote
Work type
fulltime
Grade
middle
1 week ago
Data Engineer
etl
elt
apache spark
scala
airflow
python
hadoop
hive
sql
linux
bash
Дата инженер
#удаленкарф #офис
Компания: билайн
🔷Наша команда состоит:
Team lead Data Analyst, 3 Data Analyst, DWH Analyst, 1 DE
🔷Итак, вам предстоит:
-Написание ETL/ELT пайплайнов обработки данных начиная от шага получения данных из сторонних систем и заканчивая построением витрин данных;
-Разработка и поддержка витрин данных;
-Создание DAG для запуска отчётов по расписанию;
-Добавление метрик и алертов на актуальность исходных данных
🔷Мы будем рады рассмотреть вашу кандидатуру, если у вас есть:
Опыт работы в роли Data Engineer от 2 лет;
Понимание архитектуры Apache Spark, опыт по анализу и оптимизации обработки данных на Spark от 1 года;
Scala — знание на уровне написания пайплайнов Spark (либо желание перейти на Scala с Python);
AirFlow — опыт в использовании от 1 года;
Python — знание на уровне написания DAG по имеющемуся примеру;
Hadoop, Hive — опыт от 1 года;
SQL — на уровне чтения и понимания кода Hive;
Linux и Bash — на уровне пользователя;
Готовность общаться с бизнесом и отвечать end-to-end за задачу.
🔷Будет плюсом:
-Опыт работы с Grafana, VictoriaMetrics или аналогами;
-Опыт работы с потоковой обработкой данных;
-Знакомство с инструментом NiFi;
-Хороший опыт с CI (используется Gitlab CI);
-Опыт работы с окружением разработчика (Jira, Confluence)
🔷Что мы предлагаем:
-Трудоустройство в аккредитованную ИТ-компанию;
-Возможность работать дистанционно на территории РФ;
-Сильную команду специалистов, с которой можно расти;
-Свободу в принятии решений, возможность влиять на процесс и результат;
-Развитое внутреннее DE комьюнити (chapter из 150+ человек) с регулярными митапами и встречами по обмену опытом;
-Ежегодный процесс ревью;
-Десятки Пбайт разнообразных данных — от классических табличных до гео, графов, кликстримов, текстов и картинок;
-Внешнее и внутреннее обучение, участие в митапах и конференциях;
-Полис добровольного медицинского страхования, обслуживаемый в лучших клиниках;
-Корпоративные скидки на товары и услуги от партнеров компании;
-Компенсацию ваших затрат на занятия спортом (бег, футбол, волейбол, плавание и йога) в размере 30% от их стоимости;
-Служебную сотовую связь.
Контакты:
⬇️ Другие каналы IT-вакансий:
@best_itjob
@it_rab
#удаленкарф #офис
Компания: билайн
🔷Наша команда состоит:
Team lead Data Analyst, 3 Data Analyst, DWH Analyst, 1 DE
🔷Итак, вам предстоит:
-Написание ETL/ELT пайплайнов обработки данных начиная от шага получения данных из сторонних систем и заканчивая построением витрин данных;
-Разработка и поддержка витрин данных;
-Создание DAG для запуска отчётов по расписанию;
-Добавление метрик и алертов на актуальность исходных данных
🔷Мы будем рады рассмотреть вашу кандидатуру, если у вас есть:
Опыт работы в роли Data Engineer от 2 лет;
Понимание архитектуры Apache Spark, опыт по анализу и оптимизации обработки данных на Spark от 1 года;
Scala — знание на уровне написания пайплайнов Spark (либо желание перейти на Scala с Python);
AirFlow — опыт в использовании от 1 года;
Python — знание на уровне написания DAG по имеющемуся примеру;
Hadoop, Hive — опыт от 1 года;
SQL — на уровне чтения и понимания кода Hive;
Linux и Bash — на уровне пользователя;
Готовность общаться с бизнесом и отвечать end-to-end за задачу.
🔷Будет плюсом:
-Опыт работы с Grafana, VictoriaMetrics или аналогами;
-Опыт работы с потоковой обработкой данных;
-Знакомство с инструментом NiFi;
-Хороший опыт с CI (используется Gitlab CI);
-Опыт работы с окружением разработчика (Jira, Confluence)
🔷Что мы предлагаем:
-Трудоустройство в аккредитованную ИТ-компанию;
-Возможность работать дистанционно на территории РФ;
-Сильную команду специалистов, с которой можно расти;
-Свободу в принятии решений, возможность влиять на процесс и результат;
-Развитое внутреннее DE комьюнити (chapter из 150+ человек) с регулярными митапами и встречами по обмену опытом;
-Ежегодный процесс ревью;
-Десятки Пбайт разнообразных данных — от классических табличных до гео, графов, кликстримов, текстов и картинок;
-Внешнее и внутреннее обучение, участие в митапах и конференциях;
-Полис добровольного медицинского страхования, обслуживаемый в лучших клиниках;
-Корпоративные скидки на товары и услуги от партнеров компании;
-Компенсацию ваших затрат на занятия спортом (бег, футбол, волейбол, плавание и йога) в размере 30% от их стоимости;
-Служебную сотовую связь.
Контакты:
⬇️ Другие каналы IT-вакансий:
@best_itjob
@it_rab