Задачи по созданию платформы данных описаны чётко, а стек актуален; обязательная работа в офисе и отсутствие информации о гибкости могут подойти не всем.
?Только офис
Актуальный стек
Понятная зона ответственности
Данные для ИИ
Мэтч & Сопровод
Покажет вашу совместимость и напишет письмо
Создать профиль и узнать мэтч
Описание вакансии
Текст:
Hirify AI/Оригинал
TL;DR
Data Engineer (Python/SQL, ClickHouse): Проектирование и запуск платформы данных с хранилищем, интеграциями, едиными справочниками и витринами с акцентом на архитектуру, качество и актуальность данных. Фокус на разработке ETL/ELT-загрузок, DAG в Airflow, оптимизации ClickHouse и подготовке данных для аналитики, сервисов и ИИ-сценариев.
Локация: Москва, Лесная улица, 5; работа на месте работодателя. График: 10:00–19:00.
Компания
Команда продуктов и цифрового развития ГК «КИТ 1217», создающая платформу данных для аналитики, сервисов и ИИ-сценариев.
Что делать
Определять целевую архитектуру платформы данных совместно с ИТ-директором и командой и поэтапно внедрять её.
Разрабатывать на Python и SQL загрузки и преобразования, подключать API, базы данных, 1С и файловые выгрузки.
Проектировать слои хранилища, модели данных и витрины в ClickHouse, выбирать структуру таблиц и оптимизировать запросы.
Разрабатывать и сопровождать DAG в Airflow, включая зависимости, расписания, повторные запуски, догрузки и обработку сбоев.
Настраивать проверки качества, мониторинг и уведомления, обеспечивать защиту от дублей, полноту и актуальность данных.
Согласовывать справочники и правила сопоставления с бизнес-аналитиком, сопровождать компоненты платформы, документировать решения и принимать интеграции подрядчиков.
Требования
Опыт самостоятельного построения хранилища или существенной его части — от архитектуры до работающих загрузок и витрин.
Сильный SQL, уверенный Python, Git, тестирование и обработка ошибок.
Практический опыт эксплуатации Apache Airflow: разработка DAG, диагностика сбоев и безопасные повторные загрузки.
Практический опыт работы с ClickHouse: моделирование аналитических данных, загрузка, оптимизация запросов и понимание особенностей СУБД.
Понимание ETL/ELT, слоистой архитектуры, инкрементальных загрузок и контроля качества данных.
Рабочие навыки Linux и Docker для запуска и диагностики компонентов.
Способность самостоятельно проектировать и писать код, запускать решения, обосновывать выбор технологий и обсуждать с бизнесом смысл данных.
Опыт работы: от 3 до 6 лет.
Хорошо, если есть
PostgreSQL, S3 и Parquet, CI/CD, dbt.
Опыт с 1С, рекламными платформами, Mediascope, НСИ/MDM и подготовкой данных для ИИ-сервисов.
Культура и преимущества
Профессиональная команда, корпоративное обучение и развитие.
Офис рядом с метро «Белорусская»; доступны чай, кофе, фрукты и снеки.
ДМС после испытательного срока.
Оформление трудовых отношений по ТК РФ.
В офисе живёт кот Кузя.
Процесс найма
Кандидатов приглашают на очное знакомство в офис.
Работодатели не запрашивают данные банковских карт или коды из СМС; при сомнениях необходимо запросить подтверждение у рекрутера с официальной почты.
Будьте осторожны
Если работодатель просит войти в их систему, используя iCloud/Google, прислать код/пароль, запустить код/ПО, не делайте этого. Это мошенники. Обязательно жмите «Пожаловаться» или пишите в поддержку. Подробнее в гайде →