Data Engineer (Python/Spark)

#вакансия #dataengineer #удаленка

Вакансия: Data-инженер
Компания: ФГБУ «ЦНИИОИЗ»
Формат: офис, гибрид, удалёнка из РФ 📍
Занятость: полная
Вилка: 💳200 000–280 000 ₽ на руки в зависимости от уровня (полностью белая, ТК РФ)

Мы – подразделение в Министерстве здравоохранения в прямом подчинении у Министра, которое привлекается для решения самых приоритетных задач и управления наиболее важными ведомственными проектами.

📝 Чем предстоит заниматься:

• Проектировать, разрабатывать и сопровождать ETL/ELT-процессы для загрузки, преобразования и контроля качества данных;
• Разрабатывать и оптимизировать сложные DAG в Apache Airflow;
• Проектировать архитектуру пайплайнов данных с учетом надежности, масштабируемости и производительности;
• Интегрировать данные из различных источников: PostgreSQL, внешние API, webhook, S3-совместимые хранилища и другие системы;
• Разрабатывать и сопровождать пайплайны обработки данных на Python и Apache Spark;
• Работать с lakehouse-архитектурой и таблицами Apache Iceberg;
• Оптимизировать SQL-запросы, ETL/ELT-процессы и инфраструктуру обработки данных;
• Писать тесты для пайплайнов данных, обеспечивать качество и стабильность решений;
• Проводить code review и участвовать в развитии инженерных стандартов команды;
• Взаимодействовать с аналитиками, BI-специалистами и разработчиками для реализации бизнес-требований к данным;
• Участвовать в сопровождении инфраструктуры и разборе инцидентов.

✅ Что мы ожидаем

• Опыт работы дата-инженером / ETL-разработчиком / backend-разработчиком от 1 года;
• Уверенное знание Python;
• Уверенное знание SQL, опыт написания и оптимизации сложных запросов;
• Практический опыт работы с PostgreSQL;
• Опыт работы с Apache Airflow, умение самостоятельно создавать и сопровождать сложные DAG;
• Понимание архитектуры пайплайнов данных и умение проектировать технические решения;
• Опыт разработки ETL/ELT-пайплайнов;
• Опыт оптимизации производительности обработки данных;
• Навыки написания тестов;
• Опыт проведения code review;
• Опыт работы с различными источниками данных и интеграциями;
• Самостоятельность, системное мышление, ответственность

🥇Что мы предлагаем
1. Зарплата 200 -280 тыс руб (на руки), в зависимости от уровня
2. Ненормированный график, но без переработок (любые переработки компенсируются дополнительными выходными днями, но нужно быть готовым в случае необходимости поработать и поздно вечером, и в выходной день);
3. Офис в центре города (м. Трубная/Цветной бульвар).

Заинтересовало? Направь резюме 📩 Показать контакты