Data Engineer (PySpark/Scala)

Data Engineer в АЛРОСА

Санкт-ПетербургОбязанности :

• участвовать в сборе потребностей и требований от бизнес-пользователей
• проектировать новые и сопровождать реализованные интеграционные потоки данных
• участвовать в наполнении и развитии корпоративного хранилища данных
• создавать новые и поддерживать реализованные витрины
• реализовывать Best practice процессы data governance
• описывать потоки в каталоге данных

Требования :

• опыт проектирования архитектуры хранилищ данных (Kimball,Inmon, DataVault2.0);
• опыт работы c MPP системами (Greenplum, ClickHouse);
• опыт разработки на PySpark/Scala;
• опыт оптимизации сложных SQL запросов;
• опыт проектирования ETL по продуктам из стека Arenadata и аналоги;
• опыт построения отчетности;
• опыт работы с нереляционными БД.

Будет плюсом :

• опыт DevOps практик - поддержка, развитие инфры, CI\CD;
• опыт реализации витрин в ClickHouse или в Hadoop/S3;
• опыт разработки тестов сборок моделей, YAML конфигурации.

Условия :

• оформление в штат компании по ТК РФ, все условия трудоустройства прозрачные и честные, декретная ставка;
• ДМС после испытательного срока;
• обучение и поддержка;
• основной отпуск 28 календарных дней;
• достойная заработная плата;
• работа в офисе в городах присутствия АЛРОСА, удаленная или частично удаленная;
• возможность работать над проектами, не имеющими аналогов в мире.

Откликнуться : hh.ru/vacancy/132148673 Также укажите, что узнали о вакансии в телеграм-канале IT / Tech jobs