Назад
20 часов назад

Инженер данных (DWH)

Формат работы
onsite
Тип работы
fulltime
Грейд
senior
Страна
Kazakhstan
hhВакансия с HeadHunter. Контакт ведёт на hh.ru

Мэтч & Сопровод

Покажет вашу совместимость и напишет письмо

Описание вакансии

Текст:
/
TL;DR
Инженер данных (DWH): Развитие корпоративного хранилища данных, витрин и ETL-процессов для аналитики и BI с акцентом на проектирование схем, интеграции и качество данных. Фокус на оптимизации SQL и ClickHouse, построении отказоустойчивых потоков Kafka, наблюдаемости пайплайнов и рефакторинге production-решений.

Локация: Алматы, работа на месте работодателя

Компания

MyCar Group.

Что делать

  • Развивать корпоративное хранилище: проектировать слои, схемы, таблицы и представления, оптимизировать структуру хранения.
  • Разрабатывать и сопровождать витрины данных для аналитики и BI.
  • Проектировать загрузку данных из разнородных источников, интеграции, синхронизацию и обработку ошибок.
  • Настраивать мониторинг, дашборды, алертинг и контроль качества данных, задержек и сбоев загрузок.
  • Проводить аудит, профайлинг, оптимизацию и рефакторинг существующих решений, участвовать в разборе инцидентов.
  • Собирать требования с аналитиками и бизнес-заказчиками, декомпозировать задачи и вести их в Jira.

Требования

  • От 4 лет коммерческого опыта в роли DWH / Data Engineer.
  • Опыт развития и изменения хранилищ данных, а также вывода витрин в production для аналитики или BI.
  • Понимание Kimball, Inmon, star schema и ETL/ELT; умение выбирать архитектурный подход под задачу.
  • Понимание различий OLTP и OLAP и их влияния на схемы и профиль нагрузки; умение переводить бизнес-задачи в модель данных и план работ.
  • SQL на уровне оптимизации: чтение планов запросов, поиск узких мест и переписывание тяжёлых запросов.
  • Опыт с промышленной РСУБД под нагрузкой: PostgreSQL, MySQL или другой аналог.
  • Опыт работы с Kafka, включая топики, партиционирование, producers/consumers, сбои и повторную обработку.
  • Опыт с ClickHouse: схемы под паттерны запросов, движки таблиц, партиционирование и materialized views.
  • Python на уровне поддерживаемого production-кода, Airflow или другой оркестратор, Git и Jira.

Хорошо, если есть

  • Ответственность за архитектуру хранилища или крупного домена данных целиком.
  • Аудит чужих решений и доведение рефакторинга до результата.
  • Практика управления качеством данных, проверками, SLA и взаимодействием с владельцами источников.
  • Code review и развитие middle-инженеров; прямое взаимодействие с бизнес-заказчиками.
  • Интеграции с Power BI, Tableau и другими BI-системами.
  • Создание и мониторинг production-сервисов и API на Python, работа со сторонними API.
  • Опыт работы в AWS или GCP, понимание облачных сетей и безопасности.

Культура и преимущества

  • Очный график 5/2, с 09:00 до 18:00.
  • Корпоративная мобильная связь.
  • Добровольное медицинское страхование.
  • Оплата части расходов по фитнесу.

Будьте осторожны

Если работодатель просит войти в их систему, используя iCloud/Google, прислать код/пароль, запустить код/ПО, не делайте этого. Это мошенники. Обязательно жмите «Пожаловаться» или пишите в поддержку. Подробнее в гайде →