Вакансия из Telegram канала - Название доступно после авторизации
Пожаловаться
Зарплата и рынок
развернуть
По рынку СНГ данных пока нет
На международном рынке: $120к/год ($63к - $140к)
76
Хорошая вакансия
развернуть
У роли понятный фокус на Big Data и востребованный инженерный стек, но широкий набор задач по инфраструктуре и потоковой обработке предполагает заметную ответственность за всю платформу данных.
?Широкая зона задач
Актуальный стек
Гибкий формат
Мэтч & Сопровод
Покажет вашу совместимость и напишет письмо
Создать профиль и узнать мэтч
Описание вакансии
TL;DR
Data Engineer (Hadoop, Scala): Разработка и оптимизация ETL/ELT-конвейеров и распределённых систем обработки больших данных с акцентом на Hadoop/Spark-инфраструктуру, потоковую обработку и масштабирование архитектуры данных. Фокус на оптимизации распределённых вычислений и запросов, работе с Kafka и Spark Streaming, а также автоматизации инфраструктуры с помощью Docker и CI/CD.
#middle #удаленка #гибрид
Медиалогия
Data Engineer (Hadoop, Scala)
Опыт работы: 3–6 лет
Полная занятость
График: 5/2
Формат работы: удалённо или гибрид
☑️ Чем предстоит заниматься
-разработка и оптимизация ETL/ELT-конвейеров для обработки больших данных
-настройка и администрирование Hadoop/Spark-инфраструктуры (HDFS, YARN, Hive, HBase)
-оптимизация распределенных вычислений и запросов
-работа с потоковыми данными (Kafka, Spark Streaming, RabbitMQ)
-участие в проектировании и масштабировании архитектуры данных
-автоматизация процессов с использованием DevOps-практик (Docker, CI/CD)
☑️ Наши пожелания к кандидатам
-высшее (неоконченное высшее) образование
-опыт работы с Java/Scala и Big Data-фреймворками (Apache Spark, Hadoop)
-глубокие знания Hadoop-экосистемы (YARN, HDFS, Hive, HBase, Parquet)
-опыт оптимизации производительности распределенных систем
-работа с потоковой обработкой (Kafka, Spark Streaming)
-навыки работы с SQL/NoSQL (PostgreSQL, MS SQL, MongoDB)
Будет плюсом:
-опыт с PySpark, Flink, Airflow
-знание Elasticsearch, ClickHouse, Vertica
-навыки настройки кластеров и инфраструктуры
Если работодатель просит войти в их систему, используя iCloud/Google, прислать код/пароль, запустить код/ПО, не делайте этого. Это мошенники. Обязательно жмите «Пожаловаться» или пишите в поддержку. Подробнее в гайде →
Пожаловаться
Текст вакансии взят без изменений
Источник - Telegram канал. Название доступно после авторизации