Big Data Platform Support Engineer

#вакансия #fulltime #remote

Компания Centicore 💙 находится в поисках инженера сопровождения Big Data Platform. Наша компания занимается продуктовой разработкой проектов наших Заказчиков под ключ.

Формат работы: удалённо по РФ
Зарплата: 320 000–350 000 рублей на руки
Уровень: middle+

Проект связан с сопровождением Data Lake-платформы и S3/Object Storage инфраструктуры. Специалист будет работать с Kubernetes, компонентами Big Data, мониторингом и разбором production-инцидентов.

🔷 Что важно:

Экспертный опыт администрирования Linux
Опыт сопровождения высоконагруженных распределённых систем
Понимание S3/Object Storage и архитектуры распределённых хранилищ
Опыт сопровождения Kubernetes-платформ
Практический опыт работы с MinIO или другими Object Storage решениями
Опыт эксплуатации компонентов Data Lake: Apache Spark, Airflow, Flink, Kafka, Apache Iceberg
Понимание replication, erasure coding, consistency и fault tolerance
Навыки troubleshooting CPU, RAM, network, disk I/O, latency и throughput
Опыт работы с Prometheus, Grafana, алертингом и анализом логов
Ansible, Terraform, Bash или Python
Понимание incident/problem management, RCA и postmortem

Не обязательно знать весь перечисленный стек. Если есть хороший опыт с S3/Object Storage, Kubernetes и частью компонентов Data Lake, остальному готовы обучить.

🔷 Чем предстоит заниматься:

Сопровождать и развивать Data Lake-платформу
Поддерживать S3/Object Storage инфраструктуру
Работать с Kubernetes, Apache Spark, Airflow, Flink, Kafka и Apache Iceberg
Следить за состоянием платформы, настраивать мониторинг и алертинг
Диагностировать и устранять production-инциденты
Разбирать проблемы с производительностью платформы и storage-систем
Проводить RCA и разборы после инцидентов
Автоматизировать эксплуатационные задачи
Взаимодействовать с командами Data Engineering и инфраструктуры

💌 Для вопросов и резюме - просьба обращаться в личные сообщения: Показать контакты

Буду рада познакомиться! 💙