Data Engineer / Analyst (AI & Agents)

TL;DR

Data Engineer / Analyst (AI & Agents): Владелец дата-контура X-Cart — от ETL-пайплайнов и хранилища до аналитики, дашбордов и метрик с акцентом на построении надёжных моделей данных и near-real-time CDC. Фокус на разработке LLM-агентов и пайплайнов автоматизации (включая LLM-инференс и оценку качества выводов) и доведении «грязных» данных до цифр, пригодных для решений.

Компания

X-Cart — разработчик e-commerce платформы на базе PHP/MySQL, на которой работают десятки тысяч магазинов в 130+ странах.

Что делать

• Поддерживать и развивать ETL-пайплайны в Airflow (SaaS API → PostgreSQL STG → dbt → ClickHouse CDM).
• Развивать DWH-хранилище: PostgreSQL (staging + DDS) и ClickHouse (OLAP-аналитика), писать и поддерживать dbt-модели и контролировать качество данных.
• Настраивать CDC-репликацию MariaDB → ClickHouse через PeerDB и обеспечивать потоковую доставку данных near-real-time.
• Интегрировать источники данных: платежи (PayPal, Stripe), CRM (Jira, Intercom, Aircall, Salesforce), маркетинг и продуктовые метрики (Amplitude).
• Строить дашборды и отчёты в Superset (datasets, embedding, RLS) и считать бизнес-метрики (GMV, revenue share, churn и др.).
• Разрабатывать LLM-агентов и пайплайны автоматизации (Slack-боты, скоринг тикетов, обработка данных ИИ), включая LLM-инференс (Ollama локально и облачные модели) и оценку качества AI-выводов.

Требования

• Уверенный SQL и опыт проектирования моделей данных (staging → marts, звёзды/DDS).
• Практика с Airflow (или аналогом) и dbt; опыт с ClickHouse как OLAP-хранилищем (движки, партиционирование, оптимизация запросов).
• Python для автоматизации: ETL-скрипты, работа с API, обработка данных.
• CDC-репликация: практический опыт с PeerDB (или Debezium/аналогом) для доставки данных из боевой БД в аналитическое хранилище near-real-time.
• BI на Superset: построение дашбордов/отчётов, datasets, embedding, RLS.
• Реальный опыт с LLM и агентами: prompt engineering, вызов моделей через API, автоматизация задач через ИИ; умение брать расплывчатую задачу и доводить до результата без микроменеджмента.

Культура и преимущества

• Оформление по ТК РФ с первого дня, белая заработная плата и performance review не реже раза в год.
• Гибридный формат: офис в Ульяновске или удалёнка из любой точки мира; гибкий рабочий график.
• Финансовая поддержка на покупку образовательных курсов.
• Корпоративные скидки на изучение английского языка онлайн и офлайн.
• Полная автономность и влияние на продукт: видно результат от источника до решения.

Процесс найма

• Интервью для обсуждения уровня и подбора задач под ваш опыт.
• Оценка релевантности опыта с LLM/агентами по примерам того, что уже было построено.