javapythonsqlkafkahadoopdata warehousingflinkscalasparkdata lake
Описание вакансии
Ведущий Data Engineer
#офис #200k
Локация: Москва Компания: ООО ИЦ АЙ-ТЕКО ЗП: до 300 000 ₽
СТРОГО ВЫСШЕЕ ОБРАЗОВАНИЕ!!!!
🔹Требования
• уверенное знание SQL
• уверенное знание языков scala/java, bash
• опыт работы с базами данных (SQL/NoSQL)
• понимание концепции хранилищ данных (DWH, Data Lake): слои, витрины, агрегаты, Data Quality, полная-инкрементальная загрузки
• знание типов медленно меняющихся измерений
• знание основных компонент инфраструктуры Hadoop, понимание принципов их работы (HDFS, YARN, HIVE, Oozie)
• уверенное знание архитектуры, принципов работы и API инструментов Apache Spark, Apache Flink, Apache Kafka, Apache Iceberg, Trino, Velox, Hbase
• понимание основных принципов RESTful API
• хорошее понимание архитектуры микросервисов
• понимание принципов SOLID и умение соблюдать их на практике
• опыт написания тестов (unit, integration, acceptance)
• опыт работы с git и прочими системами контроля версий
• умение работать в команде и принимать ответственные решения
• готовность обучаться новым технологиям.
🔹Будет плюсом:
• навыки программирование на python
• опыт работы с ClickHouse
• Опыт работы с S3 и Kubernetes
ВЫСШЕЕ ОБРАЗОВАНИЕ!!!
🔹МЫ ПРЕДЛАГАЕМ:
-Работу в стабильной компании, "белую" заработную плату;
-Оформление в соответствии с ТК РФ с первого дня работы;
-Расширенный социальный пакет: ДМС (включая стоматологию), корпоративные скидки на посещение фитнес-клубов, футбольная и волейбольная секции;
-Профессиональное обучение и развитие;
-Яркая и насыщенная корпоративная жизнь;
-Снабжаем всей необходимой современной техникой: мощный ноут привезут прямо в день оформления; Контакты: Показать контакты