2 часа назад
Software Tester (QA Engineer) (AI)
80 000₽
hhВакансия с HeadHunter. Контакт ведёт на hh.ru
Мэтч & Сопровод
Покажет вашу совместимость и напишет письмо
Описание вакансии
Текст:
TL;DR
Software Tester (QA Engineer) (AI): Тестирование текстовых и голосовых AI-агентов, SaaS-платформы, интеграций, биллинга и SDK с акцентом на качество непредсказуемых ответов, контекст, безопасность и голосовые сценарии. Focus on построении регрессии перед релизами, воспроизводимых приёмочных проверок, анализе логов и поиске ошибок, которые не выявляются сравнением строк.
Локация: удалённо, из любой точки
Зарплата: от 80 000 ₽ на руки в месяц
Компания
Овелфиш создаёт SaaS-платформу для разработки цифровых AI-сотрудников, которые общаются с клиентами в мессенджерах, на сайтах и по телефону.
Что делать
- Тестировать текстовых и голосовых AI-агентов, включая сценарии, контекст, безопасность, распознавание речи, перебивания, паузы и работу при плохой связи.
- Проводить регрессионные проверки перед релизами и выстраивать процесс выявления дефектов до выхода в продакшен.
- Принимать работу разработчиков по критериям из технического задания и оформлять воспроизводимые доказательства проверок.
- Тестировать пользовательскую часть платформы, подключение каналов, интеграции, загрузку баз знаний и биллинг.
- Проверять SDK для внешних разработчиков с позиции пользователя библиотеки.
Требования
- От 2 лет опыта в тестировании веб-, API- или мобильных продуктов.
- Обязателен реальный опыт тестирования AI-продуктов: чат-ботов, ассистентов, голосовых роботов или LLM-систем.
- Понимание контекста LLM, системных инструкций, промптов, вызова инструментов и причин галлюцинаций.
- Python на уровне скриптов, REST API, JSON и SQL с SELECT и JOIN.
- Умение читать логи, формулировать воспроизводимые баг-репорты и самостоятельно определять сценарии проверки.
Хорошо, если есть
- Опыт с голосовыми сервисами, автотестами на Python, pytest и requests.
- Знакомство с promptfoo, DeepEval или Ragas.
- Опыт с векторным поиском и базами знаний.
- Уверенное владение Git.
- Английский для чтения документации.
Культура и преимущества
- Полная занятость удалённо, из любой точки, с графиком 5/2 или 6/1.
- Работа по договору ГПХ с самозанятым, ИП или физическим лицом; выплаты два раза в месяц.
- Небольшая команда, прямая связь с техлидом и CEO, без лишней бюрократии и созвонов.
- Письменная постановка задач и критерии приёмки.
- Испытательный срок — 2 месяца; после него формируется индивидуальный трек роста с пересмотром раз в квартал.
Процесс найма
- Сопроводительное письмо не требуется.
- В отклике нужно ответить на два вопроса: предложить три сценария для выявления ошибок чат-бота и описать одну самостоятельно найденную ошибку AI-системы.
Будьте осторожны: если работодатель просит войти в их систему, используя iCloud/Google, прислать код/пароль, запустить код/ПО, не делайте этого - это мошенники. Обязательно жмите "Пожаловаться" или пишите в поддержку. Подробнее в гайде →