Назад
1 день назад

Middle QA Engineer (AI)

250 000
Формат работы
remote (только Russia)
Тип работы
fulltime
Грейд
middle
Страна
Russia
hhВакансия с HeadHunter. Контакт ведёт на hh.ru

Мэтч & Сопровод

Покажет вашу совместимость и напишет письмо

Описание вакансии

Текст:
/
TL;DR
Middle QA Engineer (AI): Тестирование AI-агентов, ассистентов и комплексных AI-решений с акцентом на API, интеграции, данные и оценку LLM/RAG-систем. Фокус на анализе eval-наборов, проверке недетерминированного поведения моделей, автоматизации API/UI-регрессии и подготовке проектов к приемке.

Локация: удалённо из России, рабочий график с 09:00 до 18:00 по московскому времени

Зарплата: до 250 000 RUR в месяц до вычета налогов

Компания

EVO AI — IT-компания в области AI-консалтинга и генеративного искусственного интеллекта, разрабатывающая AI-агентов, ассистентов, комплексные AI-решения и собственную no-code платформу NovaAgent.

Что делать

  • Анализировать требования, критерии приёмки, риски и пробелы до начала разработки.
  • Готовить тест-планы, чек-листы, тест-кейсы, тестовые данные и acceptance scenarios.
  • Проводить функциональное, интеграционное, системное, API, UI, E2E, smoke, sanity, regression и re-testing.
  • Проверять данные в БД, анализировать логи, внешние сервисы и интеграционные взаимодействия.
  • Проводить AI/LLM/RAG/agent testing, анализировать eval-наборы и формировать новые сценарии.
  • Автоматизировать API/UI-регрессию, подключать проверки к CI/CD и помогать командам внедрять QA-практики.

Требования

  • Коммерческий опыт тестирования от 3 лет и знание техник тест-дизайна, уровней и видов тестирования.
  • Уверенное тестирование REST API через Postman, Swagger/OpenAPI или аналогичные инструменты.
  • Знание SQL для проверки состояния данных, чтение логов и понимание HTTP, JSON, авторизации, очередей и интеграций.
  • Навыки подготовки тестовой документации и работы с Jira/Confluence или аналогичными системами.
  • Базовое программирование или скриптинг на Python, Java либо JavaScript/TypeScript; понимание Git и CI/CD.
  • Понимание LLM/RAG/agent testing, eval-критериев accuracy, relevance, completeness, groundedness и safety.

Хорошо, если есть

  • Опыт тестирования backend, микросервисов, AI-сервисов или проектов с большим количеством интеграций.
  • Опыт с pytest, Playwright/Selenium, Newman, k6/JMeter, Docker и тестовыми окружениями.
  • Опыт участия в клиентской приёмке и сопровождении production-релизов.

Культура и преимущества

  • Удалённый формат работы.
  • Оформление по ТК РФ.
  • Участие в ML-/LLM-проектах федерального уровня.
  • Возможности профессионального роста, обучения и реализации технических идей.
  • Участие в обучающих сессиях, office hours и ревью тестовых артефактов.

Будьте осторожны: если работодатель просит войти в их систему, используя iCloud/Google, прислать код/пароль, запустить код/ПО, не делайте этого - это мошенники. Обязательно жмите "Пожаловаться" или пишите в поддержку. Подробнее в гайде →