6 дней назад

Senior Data Engineer (Python)

260 000 - 280 000₽

Формат работы

remote (только Russia)

Тип работы

fulltime

Грейд

senior

Страна

Russia

Вакансия из Telegram канала -

Мэтч & Сопровод

Покажет вашу совместимость и напишет письмо

Описание вакансии

TL;DR

Старший инженер по данным (Python) (Python/OpenMetadata/Airflow): Разработка интеграций, кастомных коннекторов и скриптов миграции метаданных с акцентом на Source → Sink-архитектуру, оркестрацию пайплайнов и автоматизацию через SDK. Фокус на ускорении разработки коннекторов с помощью AI-инструментов, работе с OpenMetadata Ingestion Framework и обеспечении надежной передачи данных.

#вакансия #Python #DE #DataEngineer #Senior #удалённаяработа #remote #Airflow #OpenMetadata #интеграции

🚀 Позиция: Data Engineer (Python) — Senior
💰 Ставка: 260 000 — 280 000 ₽ gross
📍 Локация: строго РФ
🌐 Формат работы: Удалённый
📋 Занятость: Полная

📋 Обязанности:
▪️ От 3 лет коммерческой разработки интеграций на Python 📅
▪️ Уверенный Python (Pydantic, классы, генераторы) 🐍
▪️ Понимание архитектуры Source → Sink в OpenMetadata 🔄
▪️ Опыт работы с Airflow и SQL 🛠️
▪️ Знание, как использовать AI-инструменты для скаффолдинга коннекторов (команда scaffold-connector) для ускорения разработки ⚡

➕ Будет +:
▪️ Практический опыт с Kafka или RabbitMQ в production (consumer groups, DLQ, гарантии доставки) 📨
▪️ Опыт с gRPC / Protobuf и Redis (reactive Lettuce, кеширование, TTL) 🧩
▪️ Опыт с Docker, Kubernetes, CI/CD и observability (Micrometer, Prometheus, Grafana, OpenTelemetry) 📊

🎓 Образование: в приоритете кандидаты с высшим IT-образованием

💻 Стек: Python, Pydantic, Apache Airflow, OpenMetadata (Server + Ingestion Framework), PostgreSQL, REST API, OpenMetadata SDK

📋 Задачи:
▪️ Реализация интеграций на проекте 🔌
▪️ Разработка кастомных коннекторов (Ingestion Framework) и скриптов миграции метаданных 🧱
▪️ Автоматизация через SDK ⚙️
▪️ Настройка и оркестрация пайплайнов в Airflow 🌀

📩 Если ваш опыт соответствует требованиям, присылайте резюме:

Будьте осторожны

Если работодатель просит войти в их систему, используя iCloud/Google, прислать код/пароль, запустить код/ПО, не делайте этого. Это мошенники. Обязательно жмите «Пожаловаться» или пишите в поддержку. Подробнее в гайде →

Текст вакансии взят без изменений

Источник -

Senior Data Engineer (Python)

Мэтч & Сопровод

Описание вакансии

Похожие вакансии