QA Automation Engineer (AI): Тестирование frontend, backend и AI-платформы с акцентом на REST API, AI-ассистентов, LLM, RAG и автоматизированную оценку качества ответов. Focus on разработке автотестов, анализе логов и метрик, локализации дефектов и повышении качества релизов AI-платформы.
Локация: Москва, улица Обручева, 30/1с2; гибридный формат работы.
Компания
Сбер2B развивает систему бизнес-сервисов для государства, бизнеса и регионов, используя аналитику больших данных, искусственный интеллект, автоматизацию и ЭДО.
Что делать
Проводить функциональное тестирование frontend, backend и AI-платформы.
Готовить тест-планы, тест-кейсы и чек-листы.
Тестировать REST API, интеграции с внутренними ИТ-системами, AI-ассистентов, агентские сценарии и работу с документами.
Проверять качество ответов LLM и RAG, включая ручную и автоматизированную оценку с использованием LLM-as-a-Judge.
Проводить регрессионное, интеграционное и приёмо-сдаточное тестирование, анализировать логи, метрики и трассировки в LangFuse и Elasticsearch.
Воспроизводить и локализовывать дефекты, взаимодействовать с разработчиками и участвовать в развитии процессов тестирования AI-платформы.
Требования
Опыт в QA не менее 3 лет, включая минимум 1 год плотной работы с автоматизацией.
Понимание принципов тестирования и взаимодействия backend и frontend через REST API.
Опыт написания тестов для backend и frontend с использованием Pytest и Playwright.
Продвинутое знание SQL.
Знание Java или Python для автоматизации.
Опыт работы с Confluence, Jira и Git.
Понимание принципов RAG, опыт работы с семантическим поиском и embedding-моделями.
Опыт работы с LLM-приложениями, агентами и платформами-конструкторами на базе LLM + RAG.
Знание методологии Agile-разработки.
Культура и преимущества
Полная занятость в аккредитованной IT-компании с гибридным форматом работы.
Ежегодный бонус по итогам работы.
ДМС, телемедицина и чек-ап после трёх месяцев; расширенные медицинские программы после двух лет непрерывного стажа в группе Сбер.
Корпоративная пенсионная программа, обучение и карьерный рост внутри команды или других подразделений.
СберПрайм, скидки у партнёров и спортклубов, корпоративные мероприятия и поддержка в особых жизненных ситуациях.
Будьте осторожны: если работодатель просит войти в их систему, используя iCloud/Google, прислать код/пароль, запустить код/ПО, не делайте этого - это мошенники. Обязательно жмите "Пожаловаться" или пишите в поддержку. Подробнее в гайде →