Назад
1 день назад

Senior Data Engineer (Python + Spark)

Формат работы
remote (Global)/hybrid
Тип работы
fulltime
Грейд
senior
Страна
Russia
vacancy_detail.hirify_telegram_tooltipВакансия из Telegram канала -

Мэтч & Сопровод

Покажет вашу совместимость и напишет письмо

Описание вакансии

TL;DR
Senior Data Engineer (Python + Spark): Разработка и оптимизация Spark-пайплайнов для ML-системы, которая в near-real-time выявляет отсутствие товаров и аномалии в продажах, с акцентом на обработку более 200 млн строк ежедневно, DWH и качество данных. Фокус на интеграции источников, мониторинге пайплайнов и обеспечении доступности данных.
#senior #гибрид #удаленка

X5 Tech
Data Engineer (Python + Spark)
Формат работы: гибрид или удалённо

В команде разрабатывается ML-система, детектирующая Out-of-stock ситуации и аномалии в продажах, которая в near-real-time выявляет потенциальные проблемы с наличием товара и отправляет предупреждения сотрудникам магазинов.

☑️ Чем предстоит заниматься
-Разрабатывать и оптимизировать Spark-пайплайны для обработки данных в масштабе (200+ млн строк ежедневно)
-Настраивать хранение и доступность данных в DWH
-Интегрировать источники данных, обеспечивать качество и мониторинг пайплайнов



IT Jobs | |

Будьте осторожны: если работодатель просит войти в их систему, используя iCloud/Google, прислать код/пароль, запустить код/ПО, не делайте этого - это мошенники. Обязательно жмите "Пожаловаться" или пишите в поддержку. Подробнее в гайде →

Текст вакансии взят без изменений

Источник -