19 часов назад
Middle Data Engineer (Forex/CFD/Broker)
2 000 - 2 500$
Вакансия из Telegram канала - Мэтч & Сопровод
Покажет вашу совместимость и напишет письмо
Описание вакансии
TL;DR
Middle Data Engineer (Airflow/dbt/Redshift): Развитие и поддержка пайплайнов данных, DWH-слоев и интеграций с источниками в Forex/CFD-брокерской платформе с акцентом на надежность, инкрементальную загрузку и качество данных. Focus on оптимизацию SQL-запросов и расходов AWS-инфраструктуры, мониторинг SLA, моделирование dbt и обеспечение идемпотентной обработки в Airflow.
#вакансия #dataengineer #middle
Middle Data Engineer/Forex/CFD/Broker
WN Talents ищет Middle Data Engineer в команду клиента. В этой роли вы будете отвечать за инженерный фундамент: надежность пайплайнов, эффективное наполнение слоев DWH, мониторинг и оптимизацию вычислительных затрат.
😎 Клиент: международный стартап в CFD/Forex/Брокер
💰 ЗП: 2000-2500$, выплата в крипте
🌍 Локация: Любая, кроме РФ.
🕦 Формат работы: полная удаленка, гибкий график, европейский часовой пояс
👥 Команда: русскоговорящая
Чем предстоит заниматься:
🧩 Развитие пайплайнов: разработка и поддержка конвейеров Airflow; перенос обработки данных из pandas в вычисления в хранилище данных в Redshift.
🧩Оптимизация загрузки: перевод DWH с полного пересчета истории (full reload) на инкрементальную загрузку.
🧩Моделирование данных: разработка dbt-моделей (слои, автоматические тесты, документация).
🧩Качество и надежность: настройка мониторинга, алертинга и SLA по актуальности данных; регулярный контроль качества (полнота, соответствие источникам, корректность типов).
🧩Интеграции: подключение новых источников (ERP-системы, продуктовые события, платежные шлюзы).
🧩Производительность: оптимизация тяжелых SQL-запросов и контроль расходов на инфраструктуру DWH.
🧩Документирование: ведение актуальной документации по пайплайнам и моделям данных.
Требования к кандидату:
🧩Опыт: от 2 лет в Data Engineering или Data Analytics с сильной инженерной составляющей.
🧩SQL & DWH: уверенный SQL и практический опыт работы с аналитическими БД (Redshift, ClickHouse, BigQuery или Snowflake).
🧩Python: уровень Production (структурирование проектов, обработка ошибок, логирование).
🧩Orchestration: опыт работы с Apache Airflow (написание DAG, обработка зависимостей, обеспечение идемпотентности, backfill).
🧩dbt & Архитектура: понимание многоуровневой архитектуры хранилища данных (сырой · тестовый · витрины)
🧩Облака (AWS): опыт работы с S3, EC2, понимание IAM и логики формирования стоимости сервисов.
🧩Инструменты & Подходы: Git, Code Review, умение самостоятельно доводить задачи до продакшена.
🧩Английский язык: уровень A2(свободное чтение технической документации).
Если заинтересовала позиция жду ваши резюме в ТГ
Middle Data Engineer/Forex/CFD/Broker
WN Talents ищет Middle Data Engineer в команду клиента. В этой роли вы будете отвечать за инженерный фундамент: надежность пайплайнов, эффективное наполнение слоев DWH, мониторинг и оптимизацию вычислительных затрат.
😎 Клиент: международный стартап в CFD/Forex/Брокер
💰 ЗП: 2000-2500$, выплата в крипте
🌍 Локация: Любая, кроме РФ.
🕦 Формат работы: полная удаленка, гибкий график, европейский часовой пояс
👥 Команда: русскоговорящая
Чем предстоит заниматься:
🧩 Развитие пайплайнов: разработка и поддержка конвейеров Airflow; перенос обработки данных из pandas в вычисления в хранилище данных в Redshift.
🧩Оптимизация загрузки: перевод DWH с полного пересчета истории (full reload) на инкрементальную загрузку.
🧩Моделирование данных: разработка dbt-моделей (слои, автоматические тесты, документация).
🧩Качество и надежность: настройка мониторинга, алертинга и SLA по актуальности данных; регулярный контроль качества (полнота, соответствие источникам, корректность типов).
🧩Интеграции: подключение новых источников (ERP-системы, продуктовые события, платежные шлюзы).
🧩Производительность: оптимизация тяжелых SQL-запросов и контроль расходов на инфраструктуру DWH.
🧩Документирование: ведение актуальной документации по пайплайнам и моделям данных.
Требования к кандидату:
🧩Опыт: от 2 лет в Data Engineering или Data Analytics с сильной инженерной составляющей.
🧩SQL & DWH: уверенный SQL и практический опыт работы с аналитическими БД (Redshift, ClickHouse, BigQuery или Snowflake).
🧩Python: уровень Production (структурирование проектов, обработка ошибок, логирование).
🧩Orchestration: опыт работы с Apache Airflow (написание DAG, обработка зависимостей, обеспечение идемпотентности, backfill).
🧩dbt & Архитектура: понимание многоуровневой архитектуры хранилища данных (сырой · тестовый · витрины)
🧩Облака (AWS): опыт работы с S3, EC2, понимание IAM и логики формирования стоимости сервисов.
🧩Инструменты & Подходы: Git, Code Review, умение самостоятельно доводить задачи до продакшена.
🧩Английский язык: уровень A2(свободное чтение технической документации).
Если заинтересовала позиция жду ваши резюме в ТГ
Будьте осторожны: если работодатель просит войти в их систему, используя iCloud/Google, прислать код/пароль, запустить код/ПО, не делайте этого - это мошенники. Обязательно жмите "Пожаловаться" или пишите в поддержку. Подробнее в гайде →
Текст вакансии взят без изменений
Источник -
