Назад
обновлено 6 дней назад

Data Engineer (DWH)

Формат работы
remote (Global)
Тип работы
fulltime
Грейд
senior
Страна
Russia
RUВакансия из Hirify RU, списка российских tech-компаний

Мэтч & Сопровод

Покажет вашу совместимость и напишет письмо

Описание вакансии

Текст:
/
TL;DR
Data Engineer (DWH): Разработка и развитие корпоративного хранилища данных с акцентом на ETL/ELT-потоки, витрины данных, SQL-оптимизацию и архитектуру DWH. Focus on проектирование масштабируемых MPP- и Hadoop-систем, создание сложных трансформаций, повышение производительности и сопровождение информационных систем.

Локация: Можно работать удалённо

Компания

Top Selection занимается подбором специалистов для корпоративных проектов.

Что делать

  • Проектировать и разрабатывать ETL/ELT-потоки, кастомные трансформации и процедуры на PL/pgSQL.
  • Создавать прототипы и витрины данных для корпоративного хранилища.
  • Разрабатывать, тестировать и сопровождать программный код.
  • Анализировать производительность систем, оптимизировать SQL-запросы и структуры баз данных.
  • Участвовать в масштабировании систем и развитии архитектуры DWH.
  • Сопровождать и мониторить информационные системы, вести базу знаний и техническую документацию.

Требования

  • Опыт работы на уровне Senior и знание принципов построения хранилищ данных и архитектуры DWH.
  • Понимание принципов работы MPP-систем и практический опыт с экосистемой Hadoop: HDFS, YARN, Apache Spark, Apache Kafka, Apache NiFi, Sqoop и Flume.
  • Уверенное знание SQL, включая DDL и DML, а также опыт анализа и оптимизации сложных запросов.
  • Опыт разработки на PL/pgSQL и работы с Greenplum или глубокое знание PostgreSQL.
  • Опыт работы с SAS Data Integration Studio и/или Informatica PowerCenter.
  • Опыт работы с Git, Jira и Confluence, сопровождения информационных систем и ведения проектной документации.

Хорошо, если есть

  • Опыт проектирования высоконагруженных хранилищ данных.
  • Опыт масштабирования MPP- и Hadoop-систем.
  • Участие в развитии крупных корпоративных DWH.
  • Опыт построения сложных ETL/ELT-процессов и витрин данных.

Будьте осторожны

Если работодатель просит войти в их систему, используя iCloud/Google, прислать код/пароль, запустить код/ПО, не делайте этого. Это мошенники. Обязательно жмите «Пожаловаться» или пишите в поддержку. Подробнее в гайде →