ML-разработчик (LLM)

Компания

Команда Yandex развивает продвинутые способности языковых моделей Alice AI для решения сложных пользовательских задач.

Что делать

• Развивать рассуждающую модель Alice AI и обучать её решать сложные задачи.
• Собирать и поддерживать пайплайны генерации сред для reinforcement learning.
• Стабилизировать RL-обучение на траекториях, включающих сотни вызовов инструментов.
• Анализировать ошибки модели на сложных фактовых запросах и преобразовывать результаты анализа в сигналы для обучения.
• Формулировать гипотезы, проводить эксперименты по элайнменту моделей и анализировать результаты совместно с аналитиками.
• Исследовать новые масштабируемые подходы к обучению LLM.

Требования

• От 3 лет опыта.
• Уверенное программирование на Python и опыт внедрения исследовательских пайплайнов в продакшен.
• Знание LLM и опыт работы в NLP и deep learning.
• Умение формулировать гипотезы и выстраивать эксперименты для их проверки.
• Готовность работать с неопределённостью и выбирать наиболее важные направления.

Хорошо, если есть

• Опыт файн-тюнинга или reinforcement learning для больших языковых моделей.
• Опыт работы в среде, требующей глубокого исследования, например в AI или quantitative research.
• Опыт создания сложных бенчмарков для языковых моделей.
• Публикации по языковым моделям и/или reinforcement learning.