Назад
5 дней назад

Data Quality Engineer, инженер по качеству данных (AI)

Формат работы
remote (только Russia)
Тип работы
fulltime
Грейд
middle
Страна
Russia
hhВакансия с HeadHunter. Контакт ведёт на hh.ru

Мэтч & Сопровод

Покажет вашу совместимость и напишет письмо

Описание вакансии

Текст:
/
TL;DR
Инженер по качеству данных (AI): Проведение аудита качества данных, создание тестов для таблиц в хранилище и автоматизация проверок с акцентом на полноту, уникальность, корректность, согласованность и актуальность данных. Focus on поиске причин нарушений качества, интеграции Python и SQL-инструментов, а также взаимодействии с командами для устранения проблем.

Локация: Санкт-Петербург, удалённо

Компания

Островок — компания в сфере онлайн-сервисов для путешествий и бронирования.

Что делать

  • Проводить аудит качества данных.
  • Создавать тесты для таблиц в хранилище и автоматизировать проверки качества данных.
  • Формировать проектную документацию по инцидентам, процессам и проверкам.
  • Консультировать владельцев данных и заказчиков по покрытию витрин проверками и тестами.
  • Искать причины нарушений качества данных и взаимодействовать с командами для их устранения.

Требования

  • От 3 лет опыта работы QA engineer, включая минимум 1 год углублённой работы в Data QA.
  • Уверенное знание SQL и понимание метрик качества данных: полнота, уникальность, корректность, согласованность и актуальность.
  • Опыт работы с Python, включая pandas, requests и SQLAlchemy.
  • Опыт работы с инструментами профайлинга, например Pandas Profiling.
  • Опыт работы с Soda, Great Expectations, Apache Deequ или DBT tests.
  • Опыт работы с Airflow.
  • Опыт работы с AI.

Хорошо, если есть

  • Опыт работы с Trino и DBT.
  • Знание одного из инструментов визуализации: Power BI, Tableau, Metabase или Grafana.

Культура и преимущества

  • Удалённый формат работы.
  • Полная занятость.

Будьте осторожны

Если работодатель просит войти в их систему, используя iCloud/Google, прислать код/пароль, запустить код/ПО, не делайте этого. Это мошенники. Обязательно жмите «Пожаловаться» или пишите в поддержку. Подробнее в гайде →