Назад
обновлено 13 часов назад

Дата-инженер (PostgreSQL/Airflow)

1 000 000KZT
Формат работы
onsite
Тип работы
fulltime
Грейд
middle
Страна
Kazakhstan
hhВакансия с HeadHunter. Контакт ведёт на hh.ru

Мэтч & Сопровод

Покажет вашу совместимость и напишет письмо

Описание вакансии

Текст:
/
TL;DR
Дата-инженер (PostgreSQL/Airflow): Развитие корпоративного хранилища данных на PostgreSQL, ClickHouse и Airflow с акцентом на восстановление ссылочной структуры исторической базы 1С, построение загрузочных DAG и аналитических витрин. Focus on моделирование слоёв и историчности, контроль качества данных, отказоустойчивость пайплайнов и создание витрин для ИИ-направления.

Локация: Алматы, проспект Аль-Фараби, 98; работа на месте работодателя, график 5/2, 09:00–18:00.

Зарплата: до 1 000 000 KZT на руки в месяц.

Компания

Страховая компания «Казахмыс» предоставляет услуги страхования и перестрахования клиентам из различных сфер деятельности.

Что делать

  • Отвечать за корпоративное хранилище данных на базе PostgreSQL, ClickHouse и Airflow.
  • Разобрать структуру исторической базы 1С объёмом около 1 ТБ, восстановить связи между сущностями и автоматически построить словарь данных.
  • Разрабатывать DAG в Airflow для загрузки данных из 1С, СЭД, Битрикс24 и внутренних сервисов.
  • Проектировать слои хранилища в PostgreSQL и аналитические витрины в ClickHouse.
  • Реализовывать историчность данных, проверки качества, мониторинг и обработку сбоев.
  • Создавать витрины для ИИ-направления, включая поисковый слой.

Требования

  • Опыт работы от 5 лет.
  • Опыт эксплуатации Airflow в production: идемпотентность, повторные прогоны, зависимости и обработка сбоев.
  • Сильный SQL и понимание принципов выполнения запросов.
  • Обязателен PostgreSQL; понимание отличий ClickHouse и случаев его применения.
  • Python для трансформаций данных.
  • Опыт моделирования хранилищ: слои, историчность и медленно меняющиеся измерения.
  • Готовность принять полную ответственность за платформу.
  • Официальное оформление по ТК РК.

Хорошо, если есть

  • Опыт работы с данными 1С.
  • Опыт работы с dbt или другим инструментом трансформаций.
  • Опыт в финансовом секторе или страховании, включая регуляторную отчётность.

Культура и преимущества

  • Собственная платформа без ограничений коробочного решения.
  • Возможность влиять на архитектуру хранилища и видеть результат работы.
  • Современный комфортный офис.
  • Отпуск 24 календарных дня.
  • Добровольное медицинское страхование по стандартной программе, материальная помощь по личным событиям и welcome pack.
  • Возмещение части стоимости фитнес-клуба, стартового взноса и участие в марафонах и корпоративных турнирах.

Процесс найма

  • Этапы процесса найма в описании не указаны.

Будьте осторожны

Если работодатель просит войти в их систему, используя iCloud/Google, прислать код/пароль, запустить код/ПО, не делайте этого. Это мошенники. Обязательно жмите «Пожаловаться» или пишите в поддержку. Подробнее в гайде →