Назад
2 дня назад

Разработчик DWH (транспортная компания)

Формат работы
remote (только Russia)
Тип работы
fulltime
Грейд
middle
Страна
Russia
vacancy_detail.hirify_telegram_tooltipВакансия из Telegram канала -

Мэтч & Сопровод

Покажет вашу совместимость и напишет письмо

Описание вакансии

TL;DR
Разработчик DWH (транспортная компания): Разработка и сопровождение ETL/ELT-потоков для хранилищ и озер данных с акцентом на SQL, PySpark, Apache Airflow и интеграцию через API, веб-сервисы и брокеры сообщений. Focus on оптимизацию OLAP-запросов, управление зависимостями пайплайнов, документирование и тестирование потоков данных.
#вакансия #DWH #middle #удаленноРФ

Мы в поиске Разработчика DWH (в проект транспортной компании)

• Компания: IT People group
• Ставка: рассмотрим вашу
• Грейд: Middle/Middle+
• Локация: РФ
• Срок привлечения: 6+ месяцев
• Формат работы: Удаленно, фултайм, по ИП/смз/ГПХ

Требования:
• Опыт работы от 3-х лет в качестве инженера данных, разработчика ETL на SQL и Pyspark;
• Опыт работы с СУБД PostgreSQL, Apache Airflow, с API, веб-сервисами, очередями и другими стандартными технологиями интеграции данных.
• Экспертиза в реализации ETL / ELT для хранилищ или озер данных;
• Уверенное владение SQL и PL/SQL;
• Оптимизация SQL, в том числе для целей OLAP;
• Навыки работы с Pyspark;
• Навыки работы с Apache Airflow — создание DAG’ов, управление зависимостями ETL-пайплайнов;
• Знание подходов к разработке, документированию, тестированию потоков данных;
• Обязательно хотя бы базовый уровень (курсы, практика или самостоятельное изучение) владения Apache Hadoop (Spark, Hive или Impala);
• Опыт работы с брокерами сообщений (Kafka, RabbitMQ);
• Опыт работы в Jira, Confluence, Git.

Soft skills:
• Самостоятельность: готовность докручивать постановки от аналитиков самостоятельно, документировать
• результаты своей работы в базе знаний;
• Готовность работать в условиях сжатых сроков;
• Взаимодействует с разработчиками, аналитиками и архитекторами внутри проектной команды, а также смежными подразделениями и экспертами заказчика.

Будет плюсом:
• Опыт работы с S3 Minio и Apache Iceberg

Для резюме

Будьте осторожны: если работодатель просит войти в их систему, используя iCloud/Google, прислать код/пароль, запустить код/ПО, не делайте этого - это мошенники. Обязательно жмите "Пожаловаться" или пишите в поддержку. Подробнее в гайде →

Текст вакансии взят без изменений

Источник -