Data Engineer

О компании и команде:

«М.ТЕХ» - АККРЕДИТОВАННАЯ ИТ-КОМПАНИЯ В ГРУППЕ «М.ВИДЕО-ЭЛЬДОРАДО» разрабатывает более 100 инновационных ИТ-продуктов на основе современной микросервисной и облачной инфраструктуры, больших данных, биометрии, ИИ и машинного обучения для улучшения качества жизни десятков тысяч сотрудников и миллионов покупателей по всей России.
ПРО ПРОДУКТ: Мы извлекаем и доставляем данные, делаем дашборды, создаем DataLake.
СТЕК: PostgreSQL, Greenplum, Clickhouse, Spark, Python, SQL, Airflow, Iceberg, Kafka, Trino, Superset, Tableau, SAP BW/ERP

Тебе предстоит:

• Поддерживать и создавать интеграции и витрины в рамках хранилища данных;


• Выстраивать ETL-процессы;


• Подключать новые источники в хранилище данных по стандартизированному процессу;


• Создавать механизмы проверки качества данных;


• Документировать результаты разработки;


• Осуществлять поддержку имеющихся процессов, проводить разбор legacy и перенос на новые инструменты.

Что мы ожидаем от кандидата:

• Опыт работы в роли DE от 5 лет;


• Знание концепций работы с git и CI/CD процессами;


• Знание SQL (временные таблицы, оконные функции, cte и тд), опыт оптимизации запросов;


• Знания принципов работы БД, построения ХД, опыт работы с Greenplum;


• Опыт разработки ETL процессов (Spark);


• Опыт работы с табличными форматами хранения (Желательно: Trino, Iceberg, S3).

Что ты получишь:

• Продукты, признанные на рынке (несколько премий за Лучший Интранет, хит-парад премий за лучшее ИТ-решение в ритейле) и имеющие амбициозные планы на развитие;


• Конструктивный диалог и возможность внедрять свои идеи, если они способствуют достижению общего результата;


• Команду увлеченных профессионалов, которая открыта к поиску нового;


• Конкурентную заработную плату, гибкое отношение к рабочему месту (посещение офиса в Инновационном центре Сколково на гибриде);


• ДМС со стоматологией.

Требования

Инженер по данным, Старший (Senior) • SQL • Greenplum • Apache Spark • Apache Airflow

Местоположение и тип занятости

Москва • Полный рабочий день