Мэтч & Сопровод
Покажет вашу совместимость и напишет письмо
Описание вакансии
Текст:
TL;DR
Промпт-инженер (AI): Проектирование архитектуры LLM-фич и управление поведением моделей через промпт-инжиниринг с акцентом на создание сложных пайплайнов и систем оценки качества. Фокус на разработке golden-сетов, оптимизации RAG-архитектур и интеграции LLM-решений в продакшн.
Локация: Можно работать удалённо (РФ) или в офисе
Компания
SimbirSoft — крупная IT-компания с государственной аккредитацией, реализующая сотни проектов в различных отраслях.
Что делать
- Проектировать архитектуру LLM-фич: single-prompt решения, цепочки промптов и сложные пайплайны.
- Управлять поведением моделей через CoT, few-shot, structured outputs и tool calling без fine-tuning.
- Разрабатывать системы оценки качества: golden-сеты, валидационные выборки, метрики, бенчмарки и LLM-as-a-judge.
- Анализировать продакшн-логи и фидбек пользователей для поиска системных проблем и улучшения решений.
- Организовывать разметку данных: писать гайды, проверять результаты и проводить разметку.
- Интегрировать разработанные решения в продукт совместно с командой разработки.
Требования
- Практический опыт работы с LLM от 1 года (реальные кейсы).
- Уверенное владение Python и инструментами работы с данными (Jupyter, pandas).
- Знание SQL для сбора датасетов и проверки гипотез.
- Опыт работы с OpenAI API или аналогичными сервисами.
- Понимание методов тестирования LLM: регресс-проверки, offline-метрики, human eval, A/B-тесты.
Хорошо, если есть
- Опыт автоматической оптимизации промптов (GEPA и др.).
- Навыки работы с observability и eval-инструментами (LangFuse, MLflow, LangSmith, DeepEval).
- Опыт построения агентных систем и RAG-архитектур.
- Знакомство с фреймворками оркестрации (LangChain, LangGraph и аналоги).
Культура и преимущества
- Гибкий график работы и выстроенные процессы удалённого сотрудничества.
- Льготы и меры господдержки для сотрудников аккредитованной IT-компании.
- Развитая система менторства, сертификация за счёт компании и изучение английского языка.
- Полный соцпакет, «белая» заработная плата и гибкая система бонусов (ДМС, оплата спорта).
- Активное профессиональное сообщество: 50+ клубов, внутренние митапы и хакатоны.
- Забота о ментальном здоровье через онлайн-консультации с психологом.
Будьте осторожны: если работодатель просит войти в их систему, используя iCloud/Google, прислать код/пароль, запустить код/ПО, не делайте этого - это мошенники. Обязательно жмите "Пожаловаться" или пишите в поддержку. Подробнее в гайде →