Data Engineer (Python)

Локация: удалённо из любой точки мира или гибридно; офисы доступны в Москве, Нижнем Новгороде, Коврове и Владимире.

Компания

Аккредитованная ИТ-компания Ви.Тех разрабатывает решения для ВсеИнструменты.ру — крупного российского интернет-магазина товаров для дома, дачи, строительства и ремонта.

Что делать

• Развивать корпоративную платформу данных и DWH.
• Переводить ETL-процессы с SSIS на Apache Airflow 3 и внутренний YAML-driven Python-фреймворк.
• Разрабатывать и поддерживать надёжные data-пайплайны с retry, backfill, идемпотентностью, дедупликацией и корректной обработкой сбоев.
• Развивать проверки качества данных и оптимизировать SQL и работу с Microsoft SQL Server.
• Развивать CI/CD-процессы, переиспользуемые инструменты и self-service-решения для аналитических команд.
• Участвовать в развитии архитектуры DWH и подходов к моделированию данных.

Требования

• От 3 лет опыта работы Data Engineer.
• Уверенный SQL и практический опыт работы с Microsoft SQL Server.
• Python: ООП, модульная архитектура, type hints, тестирование, логирование, работа с REST API и базами данных.
• Опыт работы с Apache Airflow или другим промышленным оркестратором.
• Опыт работы с dbt или аналогичным SQL transformation framework.
• Понимание ETL/ELT, batch- и near-real-time-обработки.
• Умение строить надёжные и отказоустойчивые data-пайплайны.
• Опыт работы с Git и CI/CD, а также реализации Data Quality-проверок.
• Понимание архитектуры DWH, организации слоёв данных и подходов к моделированию: Kimball, Inmon, Data Vault, Anchor Modeling.

Культура и преимущества

• Удалённая работа из любой точки мира; при желании — работа из офиса.
• Возможность влиять на продукт, предлагать идеи и получать обратную связь.
• Дружелюбная открытая атмосфера, внутренние митапы, участие в конференциях и обмен знаниями.
• Перфоманс-ревью два раза в год и премия до двух окладов.
• Расширенный ДМС со стоматологией; семью можно подключить со скидкой.
• Предоставление техники или возможность работать на собственном оборудовании.