Эта вакансия в архиве
Посмотреть похожие вакансии ↓2 месяца назад
Data Engineer (Spark/Flink/Trino)
Описание вакансии
Сильных DE/BDE - это мне надо. На удаленку в Узбекистан
Если интересно, резюме можно направить -
- Разрабатывать ingestion/CDC пайплайны доводить их до production-качества
- Строить batch-пайплайны на Spark/Flink/Trino
- Разрабатывать и поддерживать трансформации в dbt: staging/intermediate/marts, инкрементальные модели, тесты, документация и lineage.
- Оптимизировать запросы/витрины под Trino
- Прорабатывать модель данных и контракты с продуктами
- Встраивать качество, каталогизацию и доступы
- Участвовать в эксплуатации: алерты, метрики, SLO/SLA, разбор инцидентов, runbooks.
- Сильный Python
- Опыт со Spark (PySpark; Scala/Java — большой плюс).
- Понимание lakehouse подхода и работы табличных форматов
- Опыт с Kafka, понимание CDC.
- Практика Airflow и/или dbt в реальных проектах.
- Умение думать про надежность
- Опыт с Trino/Presto, настройкой и оптимизацией аналитических запросов.
- Опыт со Flink/Spark
- Опыт Kubernetes/Helm и взаимодействия с DevOps.Если интересно, резюме можно направить -
Текст вакансии взят без изменений
Источник -
