Специалист по DWH (Big Data, ETL/ELT)

TL;DR

Специалист по DWH (Big Data, ETL/ELT): Развитие архитектуры корпоративного хранилища данных и построение витрин под бизнес-задачи с акцентом на ETL/ELT-потоки, пользовательские логики трансформации и производительность MPP-систем. Фокус на оптимизации SQL и структур БД, масштабировании DWH и написании хранимых процедур на PL/pgSQL.

Локация: удаленная работа или офис клиента, либо офис SkillStaff в центре Москвы (Воздвиженка).

Company

SkillStaff помогает реализовывать ИТ-проекты для крупного бизнеса.

Что делать

• Развивать архитектуру корпоративного DWH: оценивать и внедрять оптимальные стеки технологий, методологии и инструменты.
• Проектировать и поддерживать базу знаний для пользователей DWH, регулярно обновляя её.
• Проектировать и строить прототипы и витрины данных под бизнес-задачи.
• Разрабатывать и оптимизировать потоки данных с использованием ETL/ELT-решений и пользовательских логик трансформации.
• Настраивать производительность и масштабирование существующих систем, оптимизировать SQL-запросы и структуры БД.
• Писать хранимые процедуры на PL/pgSQL и обеспечивать сопровождение решений на всех этапах жизненного цикла.

Требования

• Опыт работы в аналогичной роли от 4 лет.
• Уверенное владение экосистемой Big Data: развертывание и сопровождение Hadoop-компонентов (HDFS, YARN, Spark, Kafka, Nifi, Sqoop, Flume и др.).
• Практика построения и поддержки DWH-решений и понимание методологий проектирования хранилищ.
• Глубокое знание архитектуры MPP-систем и принципов их работы.
• Опыт с Greenplum или экспертный уровень в PostgreSQL.
• Навыки написания и отладки SQL (DDL/DML) с фокусом на максимальную производительность запросов.

Хорошо, если есть

• Опыт использования ETL-инструментов класса SAS DIS или Informatica PowerCenter.
• Умение вести проектную и техническую документацию, организовывать мониторинг и поддержку своих сервисов.

Культура и преимущества

• Аккредитованная IT-компания, «белая» зарплата.
• Комфортный график работы.
• Удаленная работа или возможность работать в офисе клиента, либо в офисе SkillStaff в центре Москвы (Воздвиженка).
• Разнообразие проектов: участие в сотнях ИТ-проектов для крупного бизнеса.
• Развитие через обмен опытом и работу с высококвалифицированными коллегами.

Процесс найма

• Собеседования с оценкой опыта в DWH/Big Data, SQL и ETL/ELT.
• Обсуждение проектного и технического опыта, включая сопровождение решений и документацию.