Инженер по тестированию (AI)

Локация: гибридный формат — 3 дня в офисе и 2 дня дома — для Москвы, Санкт-Петербурга, Казани, Ярославля, Рыбинска, Нижнего Новгорода, Воронежа, Краснодара, Самары, Екатеринбурга, Новосибирска и Владивостока. .

Компания

РТЛабс создаёт и развивает масштабные цифровые сервисы Госуслуг, включая портал, мобильные приложения, социально значимые услуги и системы электронного правительства.

Что делать

• Планировать и сопровождать релизы AI-агентов и связанных сервисов.
• Анализировать требования, технические постановки и тестовое покрытие.
• Проводить ручное функциональное, интеграционное, регрессионное и E2E-тестирование AI-агентов и их интеграций.
• Тестировать REST- и WebSocket/Socket.io API, анализировать логи и локализовывать ошибки.
• Вести чек-листы, тест-кейсы, тест-планы и E2E-сценарии в Jira/TM4Jira.
• Автоматизировать проверки на Python и участвовать в оценке качества ML/LLM-компонентов, включая проверку ответов, галлюцинаций и базовых метрик.

Требования

• Опыт тестирования веб-приложений и API от 2 лет, уверенная работа с тест-кейсами, чек-листами и Jira.
• Навыки автоматизации на Python с использованием pytest и requests, понимание интеграции автотестов в CI/CD.
• Опыт тест-дизайна: позитивные, негативные и пограничные сценарии, классы эквивалентности и граничные значения.
• Понимание ML/LLM-концепций: классификация, ранжирование, векторизация, поиск, RAG и агентные системы.
• Понимание микросервисной архитектуры, REST, очередей, WebSocket/Socket.io, Redis и Kibana на уровне чтения логов.
• Опыт работы в резюме должен быть оформлен по ТК РФ.

Хорошо, если есть

• Опыт участия в проектах с ML/LLM, тестирования качества ответов и оценки галлюцинаций.
• Опыт backend-автотестов и тестирования edge-сценариев.
• Опыт настройки тестового окружения и базовая работа с Docker/Kubernetes.
• Интерес к развитию в направлении SDET и QA-инженерии для AI, включая eval-фреймворки и автоматизацию оценки агентов.

Культура и преимущества

• Работа над социально значимыми цифровыми сервисами и уникальными проектами Госуслуг.
• Стабильный доход и квартальные премии.
• Гибкое начало рабочего дня.
• ДМС со стоматологией и международной страховкой.
• Программы внутреннего и внешнего обучения, возможности профессионального и карьерного роста.