Эта вакансия в архиве
Посмотреть похожие вакансии ↓Описание вакансии
TL;DR
Senior DataOps Engineer (Big Data): настройка и администрирование инфраструктуры обработки данных с акцентом на Kubernetes и вычислительные фреймворки. Фокус на автоматизации процессов CI/CD и построении современных Lakehouse-архитектур.
ID вакансии: DaOp_AiP
DataOps DaOp_AiP
Гр./Лок. РФ, РБ
Грейд: Senior / Senior+ / Lead
Срок проекта: от 6 месяцев
Требования:
- Опыт работы с Kubernetes: деплойменты, helm.
- Опыт работы с системами CI/CD.
- Опыт администрирования и настройки вычислительных фреймворков (Spark, Flink или аналоги).
- Опыт работы с хранилищами данных (Iceberg, Paimon или схожие).
- Опыт работы с S3-совместимыми системами хранения (MinIO или AWS S3).
- Навыки автоматизации (Bash, Python, Groovy и др.).
- Знание Git, опыт работы с GitLab/Jira/Confluence.
- Понимание принципов DWH и потоковой обработки данных.
- Английский на уровне чтения технической документации.
Будет плюсом:
- Опыт настройки CDC (Change Data Capture).
- Знание Terraform или Ansible.
- Опыт работы с Trino, StarRocks.
- Опыт в построении Lakehouse/Streamhouse архитектур.
- Знание особенностей работы с Big Data-стеком.
Вакансия размещена на Hirify напрямую от HR/нанимающего менеджера