Назад
6 дней назад

Лид направления long-horizon-агентности Alice AI LLM (AI)

Формат работы
remote (только Russia)/hybrid/onsite
Тип работы
fulltime
Грейд
lead
Страна
Russia

Мэтч & Сопровод

Покажет вашу совместимость и напишет письмо

Описание вакансии

Текст:
/
TL;DR
Лид направления long-horizon-агентности Alice AI LLM (AI): Развитие направления автономных многошаговых задач для Alice AI LLM с акцентом на бенчмарки, анализ траекторий агентов и подготовку обучающих данных. Focus on разработку систем оценки, устранение системных ошибок моделей, построение пайплайнов данных и формирование команды.

Локация: Москва; доступны гибридный, удалённый и офисный форматы работы

Компания

Yandex развивает Alice AI LLM — технологию, лежащую в основе различных продуктов компании.

Что делать

  • Возглавить направление long-horizon-агентности и развивать агентские способности Alice AI LLM.
  • Разрабатывать стратегию и план развития внешних и внутренних бенчмарков, включая Terminal и SkillsBench.
  • Формулировать требования к эталонным решениям и автоматическим верификаторам.
  • Анализировать результаты и траектории работы агентов, выявлять ограничения и устранять основные классы ошибок совместно с командами разработки и обучения.
  • Проектировать пайплайны генерации, разметки и проверки обучающих данных.
  • Нанимать и развивать сотрудников, выстраивать процессы и распределять зоны ответственности в команде.

Требования

  • Опыт руководства технической командой или работы ведущим специалистом.
  • Опыт работы в сфере NLP и уверенное владение Python и SQL.
  • Навыки анализа данных и построения эффективных процессов их обработки.
  • Знание теории вероятностей и математической статистики.
  • Понимание развития LLM и устройства агентских систем, готовность самостоятельно работать с задачами без готовых решений.
  • Активное использование инструментов вайб-кодинга и понимание различий между Claude и Codex.

Хорошо, если есть

  • Опыт работы с метриками и бенчмарками в NLP.
  • Опыт построения или оценки агентских систем.
  • Свободное чтение статей и документации на английском языке.

Культура и преимущества

  • Возможность возглавить новое направление, связанное с автономным решением сложных многошаговых задач.
  • На старте команда будет состоять из 1–2 человек, в перспективе — до пяти.
  • Работа над задачами, которые рассматриваются как один из шагов к AGI.

Будьте осторожны: если работодатель просит войти в их систему, используя iCloud/Google, прислать код/пароль, запустить код/ПО, не делайте этого - это мошенники. Обязательно жмите "Пожаловаться" или пишите в поддержку. Подробнее в гайде →