Middle Data Engineer (аутстафф)

Локация: Воронеж; доступны работа на месте работодателя, удалённый и гибридный форматы

Зарплата: 200 000–220 000 RUB в месяц до вычета налогов

Компания

SJ Global — аутстаффинговая компания, более 10 лет разрабатывающая мобильные приложения и сложные бэкенд-системы для бизнеса.

Что делать

• Разрабатывать и поддерживать ETL/ELT-процессы, data pipelines и DAG’и в Apache Airflow.
• Обрабатывать большие объёмы данных с использованием Apache Spark.
• Разрабатывать и оптимизировать SQL-запросы, витрины данных и преобразования в слоях DWH.
• Создавать интеграции с различными источниками данных.
• Контролировать качество и целостность данных, анализировать расхождения и устранять проблемы в pipeline.
• Документировать решения и взаимодействовать с аналитиками и другими участниками команды.

Требования

• От 3 лет коммерческого опыта в Data Engineering или разработке DWH.
• Коммерческий опыт разработки на Python и уверенное знание SQL, включая CTE, оконные функции, индексы и оптимизацию запросов.
• Практический опыт работы с PostgreSQL или Greenplum.
• Production-опыт работы с Apache Airflow и опыт разработки на Apache Spark.
• Опыт разработки и поддержки ETL/ELT-процессов, data pipelines и витрин данных.
• Знание принципов DWH, Data Lake, Lakehouse, контроля качества данных; уверенная работа с Git и Linux/Unix.

Хорошо, если есть

• Опыт работы с dbt, Trino, Hadoop/HDFS/Hive, S3/MinIO, ClickHouse, Kafka/NiFi.
• Знание SCD2, историчности данных, иерархических справочников и таблиц соответствия.
• Опыт интеграции с SAP или 1С, построения витрин признаков для ML и работы с Power BI или DataLens.
• Опыт работы с Grafana или Zabbix, управленческой отчётностью и задачами обеспечения качества данных.

Культура и преимущества

• Удалённая работа с возможностью работы на месте работодателя или в гибридном формате.
• Полная занятость.
• Оформление через самозанятость или ИП.
• Фиксированный оклад с выплатами один раз в месяц.