Мэтч & Сопровод
Покажет вашу совместимость и напишет письмо
Описание вакансии
Текст:
TL;DR
Data Engineer (Такси): Разработка и сопровождение ETL/ELT-пайплайнов и data-платформы на базе ClickHouse с акцентом на автоматизацию, наблюдаемость и отказоустойчивость. Focus on миграции процессов, оптимизации производительности, мониторинге, восстановлении данных после сбоев и эксплуатации через CI/CD.
Локация: Москва; удалённая работа.
Компания
Международная технологическая компания, образованная в результате слияния Wildberries и Russ, развивающая экосистему WB Такси для клиентов, водителей и операторов поддержки и масштабирующая сервис в России и странах СНГ.
Что делать
- Разрабатывать и поддерживать ETL/ELT-пайплайны для загрузки и обработки данных из различных источников.
- Участвовать в миграции процессов загрузки данных на новую data-платформу на базе ClickHouse.
- Развивать и поддерживать инструменты оркестрации и обработки данных.
- Автоматизировать разработку и эксплуатацию data-платформы: CI/CD, тестирование, развёртывание и управление конфигурациями.
- Настраивать мониторинг, логирование и алерты, участвовать в расследовании и устранении инцидентов.
- Повышать надёжность и производительность пайплайнов, обеспечивать повторную обработку данных и восстановление после сбоев.
Требования
- Опыт работы Data Engineer от 2 лет.
- Уверенное знание Python и SQL, опыт разработки и сопровождения data-пайплайнов.
- Практический опыт работы с Docker, Kubernetes и инструментами CI/CD, включая GitLab CI или аналоги.
- Опыт работы с Apache Airflow или другим оркестратором и понимание принципов построения надёжных процессов обработки данных.
- Опыт работы с ClickHouse или другими аналитическими СУБД, понимание принципов построения DWH и инкрементальных загрузок.
- Опыт диагностики технических проблем, понимание мониторинга, логирования и обеспечения отказоустойчивости систем.
Культура и преимущества
- Языковые клубы, корпоративный университет и программы развития управленческих навыков.
- Корпоративный пакет ДМС со стоматологией, корпоративный спорт и консультации психолога.
- Профессиональные и спортивные сообщества, включая клубы спикеров, футбола, йоги и шахмат.
- Гибкий подход для совмещения работы и заботы о близких, а также проекты для детей сотрудников.
- Скидки и партнёрские программы на обучение, страхование и покупки.
- Корпоративная техника, бесплатное питание в офисе и современные офисы рядом с метро.
Будьте осторожны: если работодатель просит войти в их систему, используя iCloud/Google, прислать код/пароль, запустить код/ПО, не делайте этого - это мошенники. Обязательно жмите "Пожаловаться" или пишите в поддержку. Подробнее в гайде →
Музыка
Осень
Поддержка