Вакансия из Telegram канала - Мэтч & Сопровод
Покажет вашу совместимость и напишет письмо
Описание вакансии
ID 2170
Data Engineer
Senior/Senior+
🌍 Локация: РФ
💼Сотрудничество : по ИП
Eclipse Digital
https://eclipse-studio.ru/ - наниматель
Вакансия - нашего партнера
- Проект: Инвестиционная платформа
- Длительность: До 1 года
- Возможность пролонгации: Да
📌 Основные задачи:
- Настройка интеграций с источниками данных
- Организация и поддержка работы каталога данных
- Поддержка и помощь в работе с хранилищем данных
- Взаимодействие с командами разработки и аналитики
✅ Требования:
- Опыт работы от 5 лет на аналогичной позиции (меньше не смотрим!);
- Опыт работы с Apache Airflow в корпоративной среде (настройка и управление пайплайнами данных, опыт разработки DAG на Python для автоматизации ETL процессов); оптимизация и мониторинг выполнения DAG-ов);
- Опыт самостоятельной разработки ETL/ELT процессов на основании бизнес-требований. Понимание основных принципов решения задач трансформации данных и интеграции источников данных;
- Понимание принципов и опыт работы с каталогами данных;
- Понимание принципов построения и работы с потоковыми данными (Kafka, Spark Streaming);
- Опыт работы с Kafka: развертывание (желательно), настройка/оптимизация/масштабирование (обязательно);
- Опыт использования SQL при написании сложных запросов и оптимизация производительности существующих;
- Опыт работы с реляционными базами данных (PostgreSQL, MSSQL);
- Опыт работы с облачными платформами (Yandex.Cloud);
- Навыки работы с системами контроля версий (Git).
- Понимание фондового рынка, разбирается в инструментах для инвестирования (!);
- Настройка CI/CD для дата-процессов.
❗️ Практический опыт работы с технологиями:
- язык программирования: Python
- объектное хранилище: S3
- стриминг данных: Kafka
- реляционные СУБД: Postgres, MSSQL
- NoSQL: MongoDB
- аналитическая СУБД: Clickhouse;
Soft-skills:
- Умение работать в команде, аналитическое мышление.
- Внимание к деталям и ответственность
➕ Дополнительные требования:
- Навыки работы с DBT (разработка и поддержка моделей данных с использованием DBT, интеграция DBT в пайплайны данных для трансформации данных., понимание процессов версионирования моделей данных);
- Статус квалифицированного инвестора
📨 Откликнуться можно в telegram
Data Engineer
Senior/Senior+
🌍 Локация: РФ
💼Сотрудничество : по ИП
Eclipse Digital
https://eclipse-studio.ru/ - наниматель
Вакансия - нашего партнера
- Проект: Инвестиционная платформа
- Длительность: До 1 года
- Возможность пролонгации: Да
📌 Основные задачи:
- Настройка интеграций с источниками данных
- Организация и поддержка работы каталога данных
- Поддержка и помощь в работе с хранилищем данных
- Взаимодействие с командами разработки и аналитики
✅ Требования:
- Опыт работы от 5 лет на аналогичной позиции (меньше не смотрим!);
- Опыт работы с Apache Airflow в корпоративной среде (настройка и управление пайплайнами данных, опыт разработки DAG на Python для автоматизации ETL процессов); оптимизация и мониторинг выполнения DAG-ов);
- Опыт самостоятельной разработки ETL/ELT процессов на основании бизнес-требований. Понимание основных принципов решения задач трансформации данных и интеграции источников данных;
- Понимание принципов и опыт работы с каталогами данных;
- Понимание принципов построения и работы с потоковыми данными (Kafka, Spark Streaming);
- Опыт работы с Kafka: развертывание (желательно), настройка/оптимизация/масштабирование (обязательно);
- Опыт использования SQL при написании сложных запросов и оптимизация производительности существующих;
- Опыт работы с реляционными базами данных (PostgreSQL, MSSQL);
- Опыт работы с облачными платформами (Yandex.Cloud);
- Навыки работы с системами контроля версий (Git).
- Понимание фондового рынка, разбирается в инструментах для инвестирования (!);
- Настройка CI/CD для дата-процессов.
❗️ Практический опыт работы с технологиями:
- язык программирования: Python
- объектное хранилище: S3
- стриминг данных: Kafka
- реляционные СУБД: Postgres, MSSQL
- NoSQL: MongoDB
- аналитическая СУБД: Clickhouse;
Soft-skills:
- Умение работать в команде, аналитическое мышление.
- Внимание к деталям и ответственность
➕ Дополнительные требования:
- Навыки работы с DBT (разработка и поддержка моделей данных с использованием DBT, интеграция DBT в пайплайны данных для трансформации данных., понимание процессов версионирования моделей данных);
- Статус квалифицированного инвестора
📨 Откликнуться можно в telegram
Будьте осторожны: если работодатель просит войти в их систему, используя iCloud/Google, прислать код/пароль, запустить код/ПО, не делайте этого - это мошенники. Обязательно жмите "Пожаловаться" или пишите в поддержку. Подробнее в гайде →
Текст вакансии взят без изменений
Источник -
