17 часов назад
Тестировщик (QA) AI-продуктов
30 000₽
hhВакансия с HeadHunter. Контакт ведёт на hh.ru
Мэтч & Сопровод
Покажет вашу совместимость и напишет письмо
Описание вакансии
Текст:
TL;DR
Тестировщик (QA) AI-продуктов (UI, API, LLM и RAG): Ручное тестирование веб-платформ, REST API и AI-агентов с акцентом на качество сгенерированного контента, отсутствие галлюцинаций и проверку edge-кейсов промптов. Focus on тест-дизайн, регрессионные проверки, adversarial-тестирование prompt injection и оценку недетерминированного поведения и памяти агентов.
Локация: удалённая работа, Нижний Новгород
Зарплата: до 30 000 RUR на руки в месяц
Компания
Фирма Триада разрабатывает линейку AI-продуктов, включая веб-платформы и RAG-агентов.
Что делать
- Проводить ручное тестирование UI, REST API и промптов на всех продуктах линейки.
- Создавать, расширять и поддерживать коллекции тест-кейсов для API.
- Проверять качество и корректность контента, сгенерированного LLM, включая соответствие входным данным и первоисточникам.
- Проводить регрессионное тестирование, составлять чек-листы и понятные баг-репорты.
- Приоритизировать дефекты по критичности и взаимодействовать с разработчиками по их исправлению.
Требования
- От 1 года коммерческого опыта ручного тестирования веб-сервисов, включая API и UI.
- Глубокое знание REST, HTTP и авторизации; опыт работы с Postman и Swagger.
- Понимание LLM, RAG, векторных баз данных и промпт-инжиниринга.
- Умение оценивать релевантность, отсутствие галлюцинаций и безопасность ответов, а также проводить adversarial-тесты и проверку prompt injection.
- Умение тестировать недетерминированное поведение и память AI-агентов.
- Уверенное применение тест-дизайна, включая классы эквивалентности, граничные значения и сценарные проверки; самостоятельность и навыки командного взаимодействия.
Хорошо, если есть
- Опыт в сфере охраны труда и промышленной безопасности.
- Опыт нагрузочного тестирования AI-сервисов.
- Опыт A/B-тестирования промптов и моделей.
- Знакомство с автоматизацией тестирования на Playwright или pytest.
Культура и преимущества
- Полностью удалённая работа.
- Частичная занятость около 20 часов в неделю.
- Гибкий график.
- Оформление в формате самозанятости.
Будьте осторожны: если работодатель просит войти в их систему, используя iCloud/Google, прислать код/пароль, запустить код/ПО, не делайте этого - это мошенники. Обязательно жмите "Пожаловаться" или пишите в поддержку. Подробнее в гайде →