Data Engineer (Middle+)

Локация: офисный формат в Алматы, ул. Асанбая Аскарова, 4/3. График 5/2, с 08:00 до 17:00, обед с 12:00 до 13:00.

Компания

Mechta.kz развивает собственную Data Platform для работы с данными и аналитическими системами.

Что делать

• Развивать и поддерживать Data Platform.
• Разрабатывать и оптимизировать ETL/ELT-пайплайны на Apache Airflow.
• Проектировать модели данных и развивать DWH с использованием dbt.
• Работать с PostgreSQL, ClickHouse, NoSQL и S3 Data Lake.
• Настраивать потоковую обработку через Apache Kafka, обеспечивать качество, надёжность и мониторинг данных.
• Проводить code review, внедрять инженерные практики и взаимодействовать с аналитиками, разработчиками и Data Scientists.

Требования

• От 2 лет опыта работы в роли Data Engineer.
• Глубокое знание SQL, опыт работы с PostgreSQL и ClickHouse.
• Опыт разработки и поддержки пайплайнов в Apache Airflow.
• Опыт работы с dbt: модели, макросы и тестирование.
• Уверенное знание Python, включая pandas, requests и SQLAlchemy; опыт интеграции с REST API.
• Знание OLAP/OLTP, архитектуры DWH и ETL-дизайна; опыт с Kafka, Kubernetes, S3, NoSQL, CI/CD и автоматизацией инфраструктуры.

Хорошо, если есть

• Опыт со стриминговыми пайплайнами: Kafka Connect, Spark Streaming или Flink.
• Навыки настройки мониторинга с Prometheus, Grafana или ELK.
• Опыт работы с BI-инструментами: Superset, Metabase или Tableau.
• Участие в проектировании Data Governance и Observability.

Культура и преимущества

• Полная занятость и офисный формат работы.
• Высокий уровень автономности и минимум бюрократии.
• Разноплановые проекты, сложные задачи и профессиональные вызовы.
• Своевременная выплата заработной платы.
• Комфортный офис с собственной кухней.