Data Engineer

🚕 Дата-инженер в Райдтех

Команда DWH снабжает менеджеров и аналитиков данными, которые помогают развиваться новым райдтех-направлениям. Ищем талантливого инженера данных грейда junior, middle или senior для работы над новыми доменами DWH.

Какие задачи вас ждут:

• Проектировать, реализовывать и оптимизировать сложные ETL-процессы
У нас широкий инструментарий и огромные объёмы данных. Мы активно развиваем своё хранилище и реализуем новые сложные пайплайны обработки данных. Наши инженеры работают с данными на всех этапах, начиная от появления в источниках и заканчивая финальными витринами и отчётами.

• Обеспечивать стабильность и качество того, что уже есть
Нашими данными пользуется очень много людей, и важно не сломать существующую функциональность. Можно и нужно заниматься техдолгом: мы всячески поддерживаем любые улучшения, автоматизации, правки и отключение ненужного или устаревшего.

• Участвовать в проработке и пилотировании нового
Flink, Spark, инкрементальное построение, Data Quality, развитие собственного ETL-фреймворка, тесные интеграции с аналитическими инструментами и многое другое — нужно исследовать, сравнивать, пилотировать, думать, превращать в инструменты для всех.

Мы ждём, что вы:
• Junior-, middle- или senior-специалист
• Уверенно владеете SQL, понимаете устройство современных баз данных и фреймворков обработки
• Владеете Python хотя бы на базовом уровне
• Разбираетесь в классических алгоритмах и структурах данных
• Можете объяснить, для чего нужны CI/CD, выделить преимущества использования Git и ревью кода

Будет плюсом, если вы:
• Знакомы с Hadoop, Airflow, ClickHouse, Greenplum, Postgres или готовы освоить
• Работали по методологии Agile
• Участвовали в проектировании хранилищ данных
• Создавали сложные высоконагруженные процессы ETL и ELT (отдельным плюсом будет знание инструментов Luigi и Airflow)
• Разрабатывали процессы обработки сложных событий (CEP) во времени, приближенном к реальному (Kafka Streams, Spark, Flink)
• Работаете со специализированными аналитическими инструментами на базе Python (Jupyter, Pandas, SciPy, Matplotlib, Bokeh)

Что мы предлагаем:
Мы ценим саморазвитие, поэтому у нас есть собственная образовательная платформа с 700+ курсами. А если вам нужно что-то особенное, что действительно поможет с работой, — мы можем помочь с оплатой. Это не все бонусы — полный список тут.

📩 Откликайтесь на вакансию на нашем сайте

#такси #гибрид #офис #удаленно