Назад
5 дней назад

Data Quality Engineer (AI)

Формат работы
remote (только Russia)
Тип работы
fulltime
Грейд
middle
Страна
Russia
hhВакансия с HeadHunter. Контакт ведёт на hh.ru

Мэтч & Сопровод

Покажет вашу совместимость и напишет письмо

Описание вакансии

Текст:
/
TL;DR
Data Quality Engineer (AI): Проведение аудита качества данных и создание автоматизированных тестов для таблиц в хранилище с акцентом на SQL, Python, профайлинг и контроль ключевых метрик качества. Focus on поиске причин нарушений, интеграции проверок с Airflow и взаимодействии с владельцами данных для повышения покрытия витрин.

Локация: Москва; удалённый формат работы

Компания

Островок — продуктовая компания в сфере traveltech.

Что делать

  • Проводить аудит качества данных и создавать тесты для таблиц в хранилище.
  • Автоматизировать проверки качества данных.
  • Формировать документацию по инцидентам, процессам и проверкам.
  • Консультировать владельцев данных и заказчиков по покрытию витрин чеками и тестами.

Требования

  • От 3 до 6 лет опыта; не менее 3 лет в качестве QA Engineer и не менее 1 года с углублением в Data QA.
  • Уверенное знание SQL и понимание метрик качества данных: полноты, уникальности, корректности, согласованности и актуальности.
  • Навыки поиска причин нарушений качества данных и взаимодействия с командами для их устранения.
  • Опыт работы с Python, включая pandas, requests и SQLAlchemy.
  • Опыт работы с инструментами профайлинга, например Pandas Profiling.
  • Опыт работы с Soda, Great Expectations, Apache Deequ или DBT tests.
  • Опыт работы с Airflow и AI.

Хорошо, если есть

  • Опыт работы с Trino и DBT.
  • Знание одного из инструментов визуализации: Power BI, Tableau, Metabase или Grafana.

Культура и преимущества

  • Полная занятость.
  • Удалённый формат работы.

Будьте осторожны

Если работодатель просит войти в их систему, используя iCloud/Google, прислать код/пароль, запустить код/ПО, не делайте этого. Это мошенники. Обязательно жмите «Пожаловаться» или пишите в поддержку. Подробнее в гайде →