ML-разработчик (VLM Reasoning)

Компания

Yandex развивает продуктовые мультимодальные модели для Alice AI, способные понимать визуальный контекст, документы, графики, таблицы и интерфейсы.

Что делать

• Развивать RL и RLHF для мультимодальных VLM и проектировать функции награды для визуального reasoning.
• Снижать галлюцинации моделей и обеспечивать предсказуемое, полезное и безопасное поведение.
• Развивать reasoning для документов, таблиц, графиков и интерфейсов, включая OCR и следование многошаговым инструкциям.
• Собирать reasoning-данные и экспериментировать с UG-данными и AI-фидбэком.
• Ускорять large-scale обучение и генерацию, профилировать узкие места RL loop и повышать эффективность использования GPU.

Требования

• От 3 лет опыта работы.
• Глубокое знание классических ML, NLP и CV.
• Понимание современных LLM или VLM и опыт решения прикладных задач с их помощью либо релевантный исследовательский опыт.
• Опыт работы с RL, RLHF, post-training или мультимодальным reasoning либо готовность быстро погрузиться в эти направления.
• Интерес к современным трендам LLM и VLM, умение отличать рабочие практики от хайпа и быстро реализовывать новые идеи.

Хорошо, если есть

• Опыт работы с reasoning-задачами, post-training или RLHF/alignment.
• Опыт с OCR и document understanding, включая распознавание текста, структуры документов, таблиц и графиков.
• Опыт обучения больших моделей или разработки large-scale ML-систем.
• Понимание ограничений современных VLM и опыт работы с multimodal reasoning.