Вакансия из Telegram канала - Название доступно после авторизации
Пожаловаться
Зарплата и рынок
развернуть
По рынку СНГ данных пока нет
На международном рынке: $135к/год ($105к - $154к)
76
Хорошая вакансия
развернуть
Задачи и современный стек описаны ясно, но работодатель и условия профессионального развития не раскрыты.
Актуальный стек
Понятные задачи
Работодатель не указан
Мэтч & Сопровод
Покажет вашу совместимость и напишет письмо
Создать профиль и узнать мэтч
Описание вакансии
TL;DR
Инженер данных (SQL/Python/Spark): Подключение источников данных, разработка пайплайнов и аналитических витрин для промышленного хранилища с акцентом на качество данных, CDC-загрузки и производительность. Фокус на проектировании моделей «звезда» и «снежинка», оптимизации партиционирования и планов выполнения, а также обеспечении идемпотентности и надежности загрузок.
ЗАДАЧИ
• Подключение источников данных (БД, файлы, CDC), инкрементальные загрузки
• Трансформации между слоями хранилища и проектирование аналитических витрин
• Разработка и поддержка пайплайнов в оркестраторе
• Контроль качества данных: тесты, полнота, идемпотентность загрузок
• Оптимизация производительности: партиционирование, форматы таблиц, планы выполнения
• Code review, CI/CD, документация, data lineage
ТРЕБОВАНИЯ
• Опыт Data Engineer в промышленных проектах от 2 лет
• Продвинутый SQL, Python для обработки данных
• Spark или аналоги: партиции, shuffle, планы выполнения
• dbt и Airflow или аналоги
• Iceberg, Delta или Hudi; CDC-загрузки
• Моделирование данных: звезда, снежинка
• Git, CI/CD
• Русский свободный, английский для чтения документации
Будет плюсом: банковская сфера или платёжные системы, IOMETE, Databricks, Trino, Data Vault 2.0, Kubernetes, Great Expectations или Soda, BI (Qlik, Tableau, Power BI)
Писать в лс ln или телеграм Показать контакты
Будьте осторожны
Если работодатель просит войти в их систему, используя iCloud/Google, прислать код/пароль, запустить код/ПО, не делайте этого. Это мошенники. Обязательно жмите «Пожаловаться» или пишите в поддержку. Подробнее в гайде →
Пожаловаться
Текст вакансии взят без изменений
Источник - Telegram канал. Название доступно после авторизации