Мэтч & Сопровод
Покажет вашу совместимость и напишет письмо
Описание вакансии
Текст:
TL;DR
Дата-инженер (Python): Доработка DataHub и Great Expectations, развитие компонентов платформы данных и конвейеров обработки данных с акцентом на data governance, контроль качества и потоковую и пакетную обработку. Focus on проектирование архитектурных решений, реализацию ETL/ELT-процессов, развитие CI/CD и написание unit и интеграционных тестов.
Локация: Москва, возможен гибридный или полностью удалённый формат работы в рамках официального оформления по ТК РФ. График 5/2, с 9:00 до 18:00.
Компания
Комус — производитель и комплексный поставщик товаров и услуг для бизнеса с аккредитованным ИТ-подразделением численностью более 900 сотрудников, собственными ЦОДами, облачными мощностями и крупной программой цифровой трансформации.
Что делать
- Дорабатывать OpenSource-решения DataHub и Great Expectations, интегрируя их с компонентами микросервисной платформы.
- Развивать инструменты управления инфраструктурой платформы и компоненты слоя данных.
- Реализовывать продукты данных и процедуры контроля качества данных.
- Проектировать компоненты и конвейеры обработки данных для продуктовой аналитики.
- Разрабатывать unit и интеграционные тесты, проводить код-ревью и участвовать в развитии CI/CD.
- Участвовать в разработке архитектурных решений и подходов для внедрения data governance.
Требования
- От 3 до 6 лет опыта работы; опыт разработки на Python или Java от 5 лет.
- Знание современных архитектур данных: MDW, Data Lake, Data Mesh и Data Flow.
- Опыт разработки и тестирования ETL/ELT-процессов с использованием Airflow, Dagster, Spark, Flink или Nifi.
- Знание SQL, реляционных СУБД и NoSQL-решений, включая PostgreSQL, MySQL, MSSQL, Elastic, MongoDB, Cassandra или ClickHouse.
- Понимание data governance, контроля качества данных, unit-тестирования, рефакторинга и TDD.
- Опыт работы с Terraform, Ansible или Helm, Docker, docker-compose и git.
Хорошо, если есть
- Опыт разработки Enterprise-решений на Spring, Spring Boot или Quarkus.
- Знание паттернов GoF, Fowler и EIP, а также архитектурных стилей: modulith, микросервисы, RESTful, EDA, 12factor и reactive.
- Опыт работы с Kubernetes, OpenShift, Nomad или Docker Swarm.
- Понимание DevOps-практик и современных методологий разработки ПО.
Культура и преимущества
- Официальное трудоустройство в аккредитованную ИТ-компанию.
- ДМС и корпоративное обучение с поддержкой опытного наставника.
- Современный офис рядом со станцией метро «Авиамоторная».
- Бесплатный фитнес-центр, специальные условия в фитнес-клубах, напитки, снеки и игровые пространства.
- Корпоративная программа лояльности, реферальное премирование, карьерное развитие и мероприятия для сотрудников и их семей.
Будьте осторожны: если работодатель просит войти в их систему, используя iCloud/Google, прислать код/пароль, запустить код/ПО, не делайте этого - это мошенники. Обязательно жмите "Пожаловаться" или пишите в поддержку. Подробнее в гайде →