Руководитель ML-команды системных промптов Alice AI

Локация: гибридный формат, удалённая работа или офис.

Требования

• Глубокое понимание современных LLM, instruction tuning и методов алайнмента.
• Опыт руководства техническим развитием ML-направления или сложным исследовательским проектом от 3 лет.
• Умение связывать продуктовые цели, исследовательские гипотезы и метрики качества.
• Опыт построения воспроизводимого цикла ML-экспериментов и принятия технических решений по их результатам.
• Навыки проектирования ML-систем и оценки применимости новых подходов к продуктовым задачам.
• Умение объяснять сложные решения, делиться экспертизой и договариваться со смежными командами.

Хорошо, если есть

• Опыт работы с instruction following или controllability языковых моделей.
• Опыт оценки поведения LLM или работы с reward-моделями.

Что делать

• Формировать техническое направление развития системных промптов совместно с командой, руководителем и продуктовыми партнёрами.
• Выбирать ключевые гипотезы, ставить воспроизводимые эксперименты и принимать решения по их результатам.
• Развивать методы обучения, данные и reward-модели, помогающие модели следовать системным инструкциям.
• Участвовать в разработке требований к оценке качества и проверять, насколько надёжно метрики отражают изменения поведения модели.
• Доводить подтверждённые экспериментами решения до релизной модели и согласовывать изменения с командами RL, интеграции и оценки качества.
• Исследовать подходы к управляемости языковых моделей и проектировать решения для проверки на Alice AI.

Культура и преимущества

• Доступны гибридный, удалённый и офисный форматы работы.
• Работа предполагает взаимодействие с командами RL, интеграции, аналитики и оценки качества.