Здесь можно взять на себя важную для бизнеса платформу данных с понятными техническими задачами, но полная ответственность за уже существующее хранилище может означать высокую нагрузку.
Полная ответственность
Актуальный стек
Влияние на архитектуру
Мэтч & Сопровод
Покажет вашу совместимость и напишет письмо
Создать профиль и узнать мэтч
Описание вакансии
Текст:
Hirify AI/Оригинал
TL;DR
Дата-инженер (PostgreSQL/Airflow): Развитие корпоративного хранилища данных на PostgreSQL, ClickHouse и Airflow с акцентом на восстановление ссылочной структуры исторической базы 1С, построение загрузочных DAG и аналитических витрин. Focus on моделирование слоёв и историчности, контроль качества данных, отказоустойчивость пайплайнов и создание витрин для ИИ-направления.
Локация: Алматы, проспект Аль-Фараби, 98; работа на месте работодателя, график 5/2, 09:00–18:00.
Зарплата: до 1 000 000 KZT на руки в месяц.
Компания
Страховая компания «Казахмыс» предоставляет услуги страхования и перестрахования клиентам из различных сфер деятельности.
Что делать
Отвечать за корпоративное хранилище данных на базе PostgreSQL, ClickHouse и Airflow.
Разобрать структуру исторической базы 1С объёмом около 1 ТБ, восстановить связи между сущностями и автоматически построить словарь данных.
Разрабатывать DAG в Airflow для загрузки данных из 1С, СЭД, Битрикс24 и внутренних сервисов.
Проектировать слои хранилища в PostgreSQL и аналитические витрины в ClickHouse.
Реализовывать историчность данных, проверки качества, мониторинг и обработку сбоев.
Создавать витрины для ИИ-направления, включая поисковый слой.
Требования
Опыт работы от 5 лет.
Опыт эксплуатации Airflow в production: идемпотентность, повторные прогоны, зависимости и обработка сбоев.
Сильный SQL и понимание принципов выполнения запросов.
Обязателен PostgreSQL; понимание отличий ClickHouse и случаев его применения.
Python для трансформаций данных.
Опыт моделирования хранилищ: слои, историчность и медленно меняющиеся измерения.
Готовность принять полную ответственность за платформу.
Официальное оформление по ТК РК.
Хорошо, если есть
Опыт работы с данными 1С.
Опыт работы с dbt или другим инструментом трансформаций.
Опыт в финансовом секторе или страховании, включая регуляторную отчётность.
Культура и преимущества
Собственная платформа без ограничений коробочного решения.
Возможность влиять на архитектуру хранилища и видеть результат работы.
Современный комфортный офис.
Отпуск 24 календарных дня.
Добровольное медицинское страхование по стандартной программе, материальная помощь по личным событиям и welcome pack.
Возмещение части стоимости фитнес-клуба, стартового взноса и участие в марафонах и корпоративных турнирах.
Процесс найма
Этапы процесса найма в описании не указаны.
Будьте осторожны
Если работодатель просит войти в их систему, используя iCloud/Google, прислать код/пароль, запустить код/ПО, не делайте этого. Это мошенники. Обязательно жмите «Пожаловаться» или пишите в поддержку. Подробнее в гайде →