Мэтч & Сопровод
Покажет вашу совместимость и напишет письмо
Описание вакансии
Текст:
TL;DR
Лид направления long-horizon-агентности Alice AI LLM (AI): Развитие направления автономных многошаговых задач для Alice AI LLM с акцентом на бенчмарки, анализ траекторий агентов и подготовку обучающих данных. Focus on разработку систем оценки, устранение системных ошибок моделей, построение пайплайнов данных и формирование команды.
Локация: Москва; доступны гибридный, удалённый и офисный форматы работы
Компания
Yandex развивает Alice AI LLM — технологию, лежащую в основе различных продуктов компании.
Что делать
- Возглавить направление long-horizon-агентности и развивать агентские способности Alice AI LLM.
- Разрабатывать стратегию и план развития внешних и внутренних бенчмарков, включая Terminal и SkillsBench.
- Формулировать требования к эталонным решениям и автоматическим верификаторам.
- Анализировать результаты и траектории работы агентов, выявлять ограничения и устранять основные классы ошибок совместно с командами разработки и обучения.
- Проектировать пайплайны генерации, разметки и проверки обучающих данных.
- Нанимать и развивать сотрудников, выстраивать процессы и распределять зоны ответственности в команде.
Требования
- Опыт руководства технической командой или работы ведущим специалистом.
- Опыт работы в сфере NLP и уверенное владение Python и SQL.
- Навыки анализа данных и построения эффективных процессов их обработки.
- Знание теории вероятностей и математической статистики.
- Понимание развития LLM и устройства агентских систем, готовность самостоятельно работать с задачами без готовых решений.
- Активное использование инструментов вайб-кодинга и понимание различий между Claude и Codex.
Хорошо, если есть
- Опыт работы с метриками и бенчмарками в NLP.
- Опыт построения или оценки агентских систем.
- Свободное чтение статей и документации на английском языке.
Культура и преимущества
- Возможность возглавить новое направление, связанное с автономным решением сложных многошаговых задач.
- На старте команда будет состоять из 1–2 человек, в перспективе — до пяти.
- Работа над задачами, которые рассматриваются как один из шагов к AGI.
Будьте осторожны: если работодатель просит войти в их систему, используя iCloud/Google, прислать код/пароль, запустить код/ПО, не делайте этого - это мошенники. Обязательно жмите "Пожаловаться" или пишите в поддержку. Подробнее в гайде →
Похожие вакансии
Бизнес-Азимут
12 дней назад
Data Science (LLM)
210 000 - 270 000₽
Инфостарт
7 дней назад
AI Engineer (AI)
260 000₽
Сбер
6 часов назад
Lead AI Engineer (AI Agents)
400 000 - 600 000₽
Сбер
5 дней назад
Middle AI Agent Engineer (AI)
300 000 - 500 000₽
9 дней назад
Стажер (AI Engineer/AI Developer)
Сбер
6 часов назад
ML/NLP Engineer (LLM)
350 000 - 550 000₽