Мэтч & Сопровод
Покажет вашу совместимость и напишет письмо
Описание вакансии
TL;DR
Data Engineer: Разработка и оптимизация высоконагруженных систем обработки данных для экосистемы сервисов с акцентом на real-time обработку и построение онлайн-профиля пользователя. Фокус на проектировании DWH, разработке ETL-процессов и обеспечении минимальных задержек при работе с большими данными.
Локация: Санкт-Петербург (гибридный формат работы)
Компания
Т-Банк — крупная технологическая экосистема, развивающая нефинансовые сервисы, включая покупки, рекламу, авто и развлечения.
Что делать
- Проектировать объекты DWH для обеспечения аналитических потребностей бизнеса.
- Разрабатывать и поддерживать ETL-процессы с использованием инструментов платформы данных.
- Оптимизировать существующие ETL-процессы для повышения производительности.
- Проводить аудит и оптимизацию процессов работы с данными в командах заказчиков.
- Работать с высоконагруженными стеками технологий, включая Kafka, Hadoop и Greenplum.
Требования
- Уверенное владение SQL и принципами построения DWH.
- Опыт работы с архитектурой Greenplum, Hadoop, ClickHouse и S3.
- Навыки оптимизации запросов в аналитических системах.
- Опыт работы с ETL-инструментами: Apache Airflow, Apache NiFi, Apache Flink, Apache Spark.
- Системный подход и аналитическое мышление.
Будьте осторожны: если работодатель просит войти в их систему, используя iCloud/Google, прислать код/пароль, запустить код/ПО, не делайте этого - это мошенники. Обязательно жмите "Пожаловаться" или пишите в поддержку. Подробнее в гайде →