Plus
Включить Plus
Назад
Т-Банк
обновлено 4 дня назад

Data Engineer (Data Platform)

Тип работы
fulltime
Грейд
middle/senior
RUВакансия из Hirify RU, списка российских tech-компаний

Мэтч & Сопровод

Покажет вашу совместимость и напишет письмо

Описание вакансии

Текст:
/
TL;DR
Data Engineer (Data Platform): Проектирование объектов DWH и разработка ETL-процессов для онлайн-профиля пользователя в экосистеме Т-Банка с акцентом на потоковую обработку данных, матчинг и идентификацию. Focus on оптимизацию запросов и ETL-процессов, работу с Greenplum, Hadoop, ClickHouse, S3, Kafka и обработку требований к задержке в десятки миллисекунд.

Компания

Развитие нефинансовых сервисов экосистемы Т-Банка: покупок, рекламы, автомобилей, топлива, афиши и других продуктов.

Что делать

  • Проектировать объекты хранилища данных.
  • Разрабатывать ETL-процессы с использованием инструментов платформы данных Т-Банка.
  • Оптимизировать существующие ETL-процессы.
  • Проводить аудит и оптимизацию процессов работы с данными в командах-заказчиках.
  • Разрабатывать решения для онлайн-профиля пользователя, персонализации, рекомендаций и аналитики.

Требования

  • Уверенная работа с данными и SQL.
  • Знание принципов построения DWH и стандартов архитектуры.
  • Знание архитектуры Greenplum, Hadoop, ClickHouse и S3, умение оптимизировать запросы в этих системах.
  • Опыт работы с Apache Airflow, Apache NiFi, Apache Flink и Apache Spark.
  • Аналитическое мышление и системный подход.

Хорошо, если есть

  • Опыт работы с TEDI, NiFi, Helicopter, Kafka, Hadoop и Greenplum.
  • Опыт работы с потоковой обработкой, матчингом и идентификацией данных.

Культура и преимущества

  • Работа над сервисами с большим количеством источников данных.
  • Разработка решений для персонализации, рекомендаций и аналитики.
  • Работа с требованиями к задержке обработки данных в десятки миллисекунд.

Будьте осторожны: если работодатель просит войти в их систему, используя iCloud/Google, прислать код/пароль, запустить код/ПО, не делайте этого - это мошенники. Обязательно жмите "Пожаловаться" или пишите в поддержку. Подробнее в гайде →

Категории

SQL вакансии