Назад

Старший инженер данных (AI/ML)

Тип работы
fulltime
Грейд
senior
Страна
Russia
RUВакансия из Hirify RU, списка российских tech-компаний

Мэтч & Сопровод

Покажет вашу совместимость и напишет письмо

Описание вакансии

Текст:
/
TL;DR
Старший инженер данных (AI/ML): Проектирование и оптимизация масштабируемых batch- и streaming-пайплайнов обработки данных на базе Airflow, Spark, Hadoop и ClickHouse с акцентом на качество данных и поставку признаков для аналитики и машинного обучения. Focus on разработку устойчивых ETL/ELT-процессов, оптимизацию SQL и запросов, интеграцию Kafka и S3, а также участие в создании AI/ML-сервисов.

Компания

ЭР-Телеком Холдинг — телекоммуникационная компания с Корпоративным центром ИИ.

Что делать

  • Проектировать и оптимизировать масштабируемые batch- и streaming-пайплайны обработки данных на базе Airflow, Spark, Hadoop и ClickHouse.
  • Обеспечивать качество данных с помощью валидации, профилирования и мониторинга.
  • Обеспечивать своевременную поставку признаков для аналитики и машинного обучения.
  • Участвовать в разработке AI/ML-сервисов в рамках Корпоративного центра ИИ.

Требования

  • 3–6 лет опыта работы.
  • Высшее образование.
  • Продвинутое владение SQL, включая ClickHouse, Hive и реляционные СУБД; навыки оптимизации запросов и структур хранения.
  • Продвинутое владение Python и PySpark, основы Scala для разработки и оптимизации пайплайнов на Spark.
  • Опыт работы с Hadoop/HDFS, интеграции с объектными хранилищами S3 и потоковой обработки Kafka.
  • Навыки проектирования и сопровождения устойчивых ETL/ELT-процессов в Airflow.
  • Навыки работы с Git, CI/CD и инструментами анализа Jupyter и DataSphere.

Культура и преимущества

  • Официальное трудоустройство в аккредитованный IT-актив.
  • Оплачиваемые отпуск, командировки и больничные; 100% компенсация больничного.
  • ДМС со стоматологией после испытательного срока.
  • Комфортные офисные условия, корпоративные программы партнеров и дружелюбная атмосфера.
  • Корпоративные льготы, включая зарплатный проект в «Урал ФД Банке» и подключение к телеком-услугам Дом.ru по тарифу «Сотрудник».
  • Возможности карьерного роста и участие в корпоративной жизни.

Будьте осторожны: если работодатель просит войти в их систему, используя iCloud/Google, прислать код/пароль, запустить код/ПО, не делайте этого - это мошенники. Обязательно жмите "Пожаловаться" или пишите в поддержку. Подробнее в гайде →