Not getting responses?
Posted 8 days ago - response chances decrease over time.
updated 8 days ago
Инженер данных мастер-систем (Data Engineer)
100 000 - 300 000₽
RUVacancy from Hirify RU, a list of Russian tech companies
Match & Cover letter
Will show your compatibility and write a letter
Job description
Text:
TL;DR
Инженер данных мастер-систем (Data Engineer): Проектирование операционных хранилищ и моделей мастер-данных, разработка пакетных и потоковых интеграций с акцентом на CDC, нормализацию, дедупликацию и контроль качества данных. Focus on построении интеграционного контура на Python, SQL, PostgreSQL, Microsoft SQL Server, Apache Airflow, Kafka, Flink и Debezium, а также на обеспечении консистентности и промышленной эксплуатации решений.
Локация: Санкт-Петербург, Балтийская; доступна удалённая работа
Зарплата: 100 000–300 000 ₽ в месяц на руки
Компания
Melon Fashion Group развивает направление мастер-данных и технический контур для операционных хранилищ, интеграционных потоков и систем-потребителей.
Что делать
- Проектировать структуры операционных хранилищ и модели мастер-данных.
- Разрабатывать процессы загрузки, обработки, хранения и передачи данных.
- Создавать пакетные и потоковые интеграции между информационными системами, включая CDC-механизмы.
- Реализовывать нормализацию, сопоставление, дедупликацию и консолидацию данных, а также хранение истории изменений.
- Готовить данные для DWH и систем-потребителей, разрабатывать проверки качества и автоматизированные сверки.
- Настраивать мониторинг, логирование и обработку ошибок, анализировать сбои и сопровождать решения в промышленной эксплуатации.
Требования
- Уверенное владение SQL и опыт разработки на Python.
- Опыт проектирования структур и моделей хранения данных.
- Опыт создания ETL- или ELT-процессов.
- Понимание пакетной и потоковой обработки данных, интеграционных паттернов и способов передачи данных между системами.
- Навыки работы с реляционными СУБД и понимание принципов целостности и консистентности данных.
- Умение самостоятельно разрабатывать технические решения и доводить их до промышленной эксплуатации.
Хорошо, если есть
- Опыт работы с Kafka, Flink, Debezium, ClickHouse или Apache Airflow.
- Практический опыт реализации CDC-процессов и MDM-решений.
- Опыт построения систем контроля качества данных и автоматизированных сверок.
- Понимание событийно-ориентированной архитектуры и интеграции с API, брокерами сообщений и внешними системами.
- Опыт работы с Git, CI/CD и контейнеризацией.
Культура и преимущества
- Возможность работать удалённо или в офисе в Санкт-Петербурге.
- Участие в формировании отдельного технического направления мастер-данных.
- Работа с операционными хранилищами, интеграционными потоками и промышленными системами.
Be careful: if the employer asks you to log into their system using iCloud/Google, send codes/passwords, or run code/software, don't do it - these are scammers. Always click "Report" or contact support. More in guide →
Similar vacancies
SimbirSoft
8 days ago
Data Engineer (Data Warehouse)
Профи.ру
12 days ago
Data Engineering Team Lead (BI Platform)
400 000 - 600 000₽
Ozon Банк
1 day ago
Старший инженер данных (Python)
365 000₽
Top Selection
12 days ago
Data Engineer (MLOps)
280 000 - 300 000₽
Okko IT
6 days ago
Data Engineer (RecSys)
Top Selection
10 days ago
Data Engineer (ETL-миграция)
270 000 - 285 000₽