AI Data Engineer (LLM)

Кратко

Дата инженер ИИ / AI Data Engineer (ClickHouse/LLM): проектирование корпоративного DWH, ETL/ELT-пайплайнов и агентского слоя для диалоговой аналитики с акцентом на качество данных, семантический слой и безопасность доступа. Фокус на разработке text-to-SQL и LLM-агентов, оптимизации высоконагруженных аналитических систем и построении evals для контроля качества ответов.

Локация: гибридный формат в Москве, 2 дня в офисе

Компания

Финам — финансовая компания, развивающая цифровые продукты и проекты для трансформации финансового сектора.

Что делать

• Проектировать и развивать корпоративное DWH на ClickHouse, включая модели данных, партиционирование, шардирование и материализованные представления.
• Строить и поддерживать ETL/ELT-пайплайны загрузки данных из внешних систем.
• Разрабатывать data contracts, каталог данных, data dictionary и семантический слой.
• Контролировать качество данных, настраивать валидацию, тесты и мониторинг, а также оптимизировать хранение и аналитические запросы.
• Проектировать LLM-агентов для text-to-SQL и диалоговой аналитики, интегрировать модели, инструменты и function calling.
• Настраивать evals для оценки ответов агентов и разграничение доступа в ClickHouse с помощью RBAC, row-level и column-level политик.

Требования

• От 4 лет опыта в data engineering, уровень Senior.
• Глубокий опыт с ClickHouse или другими OLAP/колоночными СУБД, уверенный SQL и оптимизация запросов.
• Опыт проектирования DWH с нуля и работы с моделями Kimball, Data Vault или wide tables.
• Опыт построения ETL/ELT-пайплайнов с Airflow, dbt или аналогами; уверенный Python или другой язык для дата-инжиниринга.
• Практический опыт с LLM-агентами, LangChain, LlamaIndex или аналогами, RAG, function/tool calling и text-to-SQL.
• Знание data governance, data contracts и методов настройки прав доступа в СУБД.

Хорошо, если есть

• Опыт с semantic или metrics layer.
• Опыт LLMOps, evals и мониторинга качества агентов.
• Знание DataHub, OpenMetadata или Amundsen.
• Опыт работы с большими объёмами данных и высоконагруженными системами.

Культура и преимущества

• Официальное трудоустройство, ДМС и социальные гарантии.
• Компенсации фитнеса, обучения и путешествий, скидки и специальные условия на продукты компании.
• Профессиональное обучение, конференции и мастер-классы за счёт компании.
• Комфортный офис в центре Москвы с зоной отдыха, кофе-поинтами и тренажёрным залом.
• Корпоративные мероприятия, сообщества по интересам и возможность участвовать в креативных проектах.