Senior DL/LLM Engineer (Multimodal)

TL;DR

Senior DL/LLM Engineer (Multimodal): Разработка и обучение мультимодальных LLM для обработки видео и аудио с акцентом на архитектуры Vision/Audio/Video и оптимизацию обучения на длинных контекстах. Фокус на проведении экспериментов по смешиванию модальностей, масштабировании ML-инфраструктуры и улучшении качества понимания видеоконтента.

Локация: Москва (офис или гибрид)

Зарплата: 300 000 — 700 000 ₽/мес на руки

Компания

Крупнейший технологический банк, развивающий передовые AI-решения и мультимодальные модели в рамках экосистемы GigaChat.

Что делать

• Проводить эксперименты по обучению Vision/Audio/Video LLM, включая настройку данных и стратегии смешивания модальностей.
• Оптимизировать ML-инфраструктуру для эффективного обучения на длинных мультимодальных контекстах.
• Формулировать и проверять гипотезы по улучшению качества LLM при работе с видео.
• Работать с распределенным обучением и обеспечивать стабильность больших систем.

Требования

• Сильный опыт в DL-инженерии, желательно в обучении LLM.
• Глубокое знание PyTorch (DDP, FSDP).
• Понимание distributed training (DP, TP, PP, EP, SP) и методов оптимизации обучения.
• Знание архитектур LLM (Transformer, attention, RoPE, MoE).
• Уверенное владение Python (asyncio, multiprocessing, отладка больших систем).

Хорошо, если есть

• Опыт обучения мультимодальных LLM и работы с длинным контекстом.
• Понимание RL-подходов (RLHF, DPO, PPO).
• Опыт построения бенчмарков с использованием LLM-as-a-judge.

Культура и преимущества

• Возможность участия в разработке open-source решений и публикации научных статей.
• Крупнейшее DS&AI сообщество внутри компании.
• Расширенный ДМС, корпоративный спортзал и пенсионная программа.
• Гибкий формат работы (офис или гибрид).
• Льготная ипотека и подписка СберПрайм+.

Процесс найма

• Первичный этап: интервью с AI-рекрутером в Telegram (около 10 минут).