Go-разработчик в Технический департамент, Москва

Локация: Москва, комбинированный формат работы

Компания

VK развивает техническую инфраструктуру продуктов и единую платформу OneDWH для хранения и обработки данных компании.

Что делать

• Развивать платформу DWH как продукт.
• Создавать инструменты для поиска данных, заведения и сопровождения ETL.
• Разрабатывать инструменты для аналитиков, работающих с данными в OneDWH.
• Работать с графами зависимостей ETL-процессов: планировать выполнение, распределять задачи по кластерам и оптимизировать процессы.
• Строить отказоустойчивые решения для критичных данных.

Требования

• Опыт разработки сервисов на Go.
• Уверенное владение PostgreSQL.
• Опыт работы с Kafka.
• Хорошее знание алгоритмов и структур данных, особенно графовых.
• Уровень: senior.

Хорошо, если есть

• Знакомство с Java, Python, Spark или YTsaurus.
• Опыт в DWH, ETL или дата-инженерии.
• Опыт работы с Airflow.
• Опыт создания CI/CD-пайплайнов в GitLab или другой системе.
• Готовность тесно работать с дата-инженерами и аналитиками.

Культура и преимущества

• Команда развивает единое хранилище данных OneDWH для всей компании.
• Данные размещаются в кластерах YTsaurus.
• В работе используются Data Catalog, ETL-фреймворк и инструменты контроля качества данных.
• Формат работы — комбинированный.