Чётко описанная роль в data engineering даёт опыт работы с большими банковскими данными и поддержку развития, но работа полностью офисная, а стек Hadoop скорее зрелый, чем передовой.
Только офис
Актуальный стек
Понятные задачи
Поддержка развития
Мэтч & Сопровод
Покажет вашу совместимость и напишет письмо
Создать профиль и узнать мэтч
Описание вакансии
Текст:
Hirify AI/Оригинал
TL;DR
Разработчик Scala (Hadoop/ETL): Разработка ETL-потоков на платформе Hadoop с использованием Scala и Spark SQL с акцентом на обработку больших объемов данных, оптимизацию вычислений и стабильность приложений. Focus on развитие логирования, анализ эксплуатационных рисков, повышение эффективности вычислительных ресурсов и создание автотестов.
Локация: Москва, Кутузовский проспект, 32. Работа на месте работодателя.
Компания
Развитие аналитических продуктов и сервисов для внутренних пользователей Сбера, включая корпоративное хранилище данных на платформе Hadoop.
Что делать
Разрабатывать ETL-потоки на платформе Hadoop с использованием Scala и Spark SQL.
Искать возможности оптимизации, повышать скорость расчетов и эффективность использования вычислительных ресурсов.
Повышать стабильность приложений, анализировать типовые ошибки и эксплуатационные риски.
Развивать систему логирования, повышая ее полноту и информативность для промышленной эксплуатации.
При необходимости участвовать в решении инцидентов, возникающих при эксплуатации.
Развивать систему контроля качества и автотесты.
Требования
Опыт работы от 1 года до 3 лет.
Уверенное знание Scala, включая коллекции, многопоточность, разделение доступа, лямбда-выражения и паттерны.
Навыки работы с одной из IDE, системой сборки и системой контроля версий Git.
Знание SQL и JDBC.
Опыт работы с технической проектной документацией: бизнес-требованиями, техническими спецификациями на разработку, архитектурой, User Guide и Admin Guide.
Готовность развиваться в профессиональной области, работать в команде, проявлять инициативу и предлагать решения.
Хорошо, если есть
Опыт работы со Scala и sbt, а также со стеком Hadoop: HDFS, Hive, Spark 2 и выше, Spark SQL.
Опыт работы с аналитическими хранилищами данных и знание теории баз данных.
Опыт работы с Unix и написания Shell-скриптов.
Опыт работы в Agile и понимание Scrum, Kanban и других фреймворков.
Культура и преимущества
ДМС, телемедицина и чек-ап после трех месяцев работы.
Страхование от несчастных случаев и болезней, специальные условия страхования членов семьи.
Корпоративное обучение, программа адаптации и онлайн-портал для обучения.
СберПрайм, скидки у партнеров, на сервисы группы Сбер и в спортивные клубы.
Корпоративные мероприятия, подарки детям и поддержка в особых жизненных ситуациях.
Возможность профессионального роста в текущей команде или других подразделениях.
Будьте осторожны
Если работодатель просит войти в их систему, используя iCloud/Google, прислать код/пароль, запустить код/ПО, не делайте этого. Это мошенники. Обязательно жмите «Пожаловаться» или пишите в поддержку. Подробнее в гайде →