Мэтч & Сопровод
Покажет вашу совместимость и напишет письмо
Описание вакансии
Текст:
TL;DR
Data Engineer (BigData): Разработка и поддержка интеграционных решений на стеке BigData с акцентом на построение DWH и DataLake. Фокус на оптимизации SQL-запросов, проектировании ETL-процессов и внедрении инженерных практик CI/CD.
Локация: Можно удалённо (РФ)
Зарплата: от 250 000 до 280 000 ₽
Компания
Крупная ритейл компания.
Что делать
- Разработка, реализация и поддержка интеграционных решений на базе Java, Groovy, Apache Nifi и Airflow.
- Определение оптимального технологического стека для конкретных проектов и задач.
- Решение технически сложных задач, требующих глубокой экспертизы в области данных.
- Разработка и контроль актуальности архитектурной документации платформы больших данных.
- Контроль качества интеграционных решений и проведение рефакторинга.
- Выстраивание инженерных практик, включая CI/CD и процессы код-ревью.
Требования
- Владение Java или Groovy, знание принципов ООП и умение работать с чужим кодом.
- Глубокие знания SQL (индексы, оптимизация, умение читать планы запросов).
- Опыт работы с реляционными БД (Oracle, Postgres, MySQL, MsSQL или DB2).
- Опыт работы с экосистемой Hadoop (HDFS, Hive) и понимание форматов данных.
- Знание ETL-инструментов (Apache Nifi, Airflow, Talend, Informatica или аналоги).
- Навыки работы с Git в консоли и деплоем в Docker/Rancher.
Хорошо, если есть
- Опыт администрирования Unix/Linux или компонентов Hadoop (Yarn, Ranger, Spark, Zookeeper).
- Опыт работы с Zabbix и Ansible.
Процесс найма
- Техническое интервью.
- Интервью с ПО.
Будьте осторожны: если работодатель просит войти в их систему, используя iCloud/Google, прислать код/пароль, запустить код/ПО, не делайте этого - это мошенники. Обязательно жмите "Пожаловаться" или пишите в поддержку. Подробнее в гайде →
