Middle QA engineer + AI

Локация: Удаленно
Компания: НаПоправку
ЗП: обсуждается на собеседовании
Занятость: Полная

НаПоправку — один из лидеров российской цифровой медицины. Наша миссия — сделать болезнь меньшим стрессом в жизни человека. Мы реализуем ее, внедряя сервисы, которые делают медицину проще и удобнее. Нам важно, чтобы каждый мог воспользоваться всеми преимуществами цифровой медицины, используя наш сервис.

Чем предстоит заниматься:
- Тестировать функциональность на базе LLM/AI/Agents.
- Проверять и улучшать промпты: проводить A/B-эксперименты, сравнивать конфигурации моделей, фиксировать критерии приемки (helpfulness, relevance, safety).
- Собирать и поддерживать набор тестов для LLM: чек-листы и тест-кейсы в TestIT, наборы входов/ожидаемых ответов.
- Выявлять и документировать дефекты AI-сценариев: галлюцинации, утечки данных, prompt injection, нестабильность температур/seed, деградации от смены версии модели.
- Тестировать API и бэкенд-сервисы.
- Писать небольшие Python-скрипты/автотесты для прогонов LLM-регрессий и вспомогательных ресерчей (по возможности).
- Проверять различные аспекты работы сайта перед релизом: скорость, работоспособность критичного функционала.
- Не позволять багам просачиваться на прод и расстраивать пользователей.

Наш идеальный кандидат:
- Уже имеет опыт тестирования веб-сайтов и мобильных приложений от 1 года. Работа с AI/LLM будет большим плюсом;
- Знает, что такое интернет и как работают сайты;
- Умеет читать ТЗ и работать по ТЗ, внимателен к деталям;
- Готов работать в культуре стартапа и видит в этом новые возможности для себя;
- Владелец отличной памяти - у нашего сервиса довольно сложная бизнес-логика и много нюансов;
- Внимателен к деталям, готов общаться и активно взаимодействовать с коллегами;
- Желательно получил высшее техническое образование (дополнительным плюсом будут курсы по тестированию);
- Python на базовом уровне.

🌐 Резюме отправлять: %contact_placeholder%

–––
Бесплатный постинг вакансий: @freeIT_job
Забирай 📚 Базу Знаний

Middle QA Engineer (AI)