Разработчик ETL

#РФ #вакансия #удаленка #работа #python #hadoop #fulltime #middle+ #senior
Позиция: Разработчик с опытом ETL
Компания: WILIX
Грейд: Middle+/ Senior
Зарплата: 200к до 250к руб.
Оформление: ТК РФ, ИП РФ
Формат: удалённая работа
Локация: Россия 🇷🇺
Гражданство кандидата: РФ 🇷🇺
Привлечение на проекте: от 6 месяцев

Требования к специалисту:

• Oracle/Hadoop/Teradata, SQL/Python/Spark/Hive, Airflow, Grafana/ SAS
• Опыт разработки ETL-процессов с использование инструментов SAS от трех лет.
• Опыт разработки ETL-процессов для Greenplum.
• Опыт участия в проектах по созданию и развитию DWH.
• Умение работать с Bash-скриптами.
• Опыт промышленной разработки на Python.
• Опыт участия в проектах по созданию и развитию Data Vault.


Чем предстоит заниматься:

Разработка:
• Разработка архитектуры системы копирования данных.
• Разработка архитектуры системы трансформации данных.
• Настройка тестовой центральной ETL среды и тестовой МРР Greenplum.
• Модуль управления (добавления) заданиями.
• Разработка переноса таблиц staging в конечные таблицы хранилища.
• Процесс создания view и плоских таблиц на основе мета данных для интеграции с другими системами.
• Реализация ETL-процесса с копированием таблиц SAS.
• Оптимизация производительности.
• Проведение нагрузочного тестирования.
• Адаптация разработанного функционала для переноса на продуктивный стенд.
• Продуктивизация сборки витрин и создание интеграций с источниками по разработанным концепциям архитектуры.
Документация:
• Разработка приемо-сдаточной документации.
• Согласование результатов на тестовом стенде.
• Участие в приемо-сдаточных испытаниях.

💌Тг для связи: Показать контакты