Senior Data Engineer (ML)

Локация: Россия; гибридный формат — работа в офисе, удалённо или с совмещением.

Компания

X5 Tech развивает технологические решения для розничного бизнеса, которыми пользуются десятки тысяч сотрудников и миллионы клиентов.

Что делать

• Разрабатывать и оптимизировать Spark-пайплайны для обработки более 200 млн строк ежедневно.
• Настраивать хранение данных и доступность информации в DWH.
• Автоматизировать интеграцию данных о продажах, акциях, ценах, остатках, погоде и календарях.
• Работать с Data Science-командой, обеспечивая стабильный и качественный поток данных для моделей машинного обучения.
• Развивать платформу прогнозирования спроса, повышая её надёжность, масштабируемость и удобство.

Требования

• Опыт разработки и оптимизации пайплайнов обработки данных.
• Знание Apache Spark и принципов построения end-to-end пайплайнов.
• Опыт работы с DWH и интеграцией данных из различных источников.
• Понимание подготовки данных для моделей машинного обучения, включая бустинг и нейронные сети.
• Готовность работать в гибридном формате в России.

Культура и преимущества

• Решения используются десятками тысяч сотрудников внутри компании и миллионами клиентов.
• Обмен опытом на митапах, демо-днях и конференциях.
• Цифровая академия, лидерский клуб и школы технических специалистов для развития.
• Стабильная компания с ресурсами для комфортной работы.
• Возможность переходить между различными проектами и направлениями.