Роль QA Automation хорошо описана и дает заметную ответственность за тестирование AI-систем и качество в продакшене, но широкий круг задач и отсутствие данных о зарплате оставляют важные условия неясными.
?Широкий круг задач
Фокус на AI
Зона ответственности
Работа над продуктом
Дополнительный отдых
Мэтч & Сопровод
Покажет вашу совместимость и напишет письмо
Создать профиль и узнать мэтч
Описание вакансии
Текст:
Hirify AI/Оригинал
TL;DR
QA Engineer (Automation/AI) (AI и автоматизация тестирования): Проектирование и развитие масштабируемых тестовых фреймворков, quality-инфраструктуры и CI/CD-проверок для AI-оркестрированных и backend-систем с акцентом на тестирование недетерминированного поведения моделей, observability и стабильность продакшена. Focus on построении verification loops и evaluation pipelines, локализации сложных дефектов и анализе цепочек отказов через логи и метрики.
Локация: удалённо, регион Астана
Компания: Meteoro Platform развивает международные продукты на базе AI-решений, генеративных моделей и распределённых систем.
Что делать
Проектировать, разрабатывать и поддерживать масштабируемые тестовые фреймворки с нуля.
Выстраивать архитектуру тестирования для AI-оркестрированных и backend-систем.
Интегрировать автоматизированные тесты и quality gates в CI/CD-пайплайны.
Разрабатывать стратегии тестирования AI/GenAI-систем, включая сценарии для недетерминированного поведения моделей.
Проектировать verification loops и evaluation pipelines для проверки качества и соответствия поведения требованиям.
Использовать логи, метрики и трассировки для диагностики production-инцидентов, root cause analysis и локализации дефектов.
Требования
От 3 до 6 лет опыта; из них не менее 2 лет в QA Automation, SDET или Software Engineering.
Опыт построения и поддержки автоматизированных тестовых фреймворков.
Опыт API-, интеграционного и E2E-тестирования.
Понимание quality gates и автоматизации проверок в CI/CD-пайплайнах.
Опыт работы с логами, метриками и observability-инструментами, включая Grafana, ELK и аналоги.
Опыт работы с Test Management Systems, включая Zephyr.
Понимание клиент-серверной архитектуры: HTTP, cookies и сессии, авторизация, асинхронная обработка через очереди.
Умение локализовать дефект до слоя фронтенда, API, воркера или базы данных.
Опыт кросс-браузерного и мобильного веб-тестирования, включая Safari/WebKit; способность самостоятельно принимать инженерные решения и отвечать за качество системы.
Английский язык — на уровне чтения технической документации.
Хорошо, если есть
Опыт тестирования LLM, AI-агентов и других AI/GenAI-систем, а также недетерминированных систем.
Опыт построения evaluation frameworks, prompt evaluation и AI quality assessment.
Знакомство с RAG-пайплайнами, vector databases и AI orchestration frameworks, включая LangChain и аналоги.
Опыт нагрузочного тестирования и использования security scanning-инструментов.
Бэкграунд в backend-разработке или SDET-роль.
Опыт работы с CI/CD: GitLab CI, GitHub Actions, Jenkins или аналогами.
Опыт работы с Python, Playwright, PostgreSQL, Redis, Kafka, WebSocket, Docker, Kubernetes, Sentry и Jira.
Культура и преимущества
Удалённый формат работы в динамичной среде AI-технологий.
25 дней отпуска, дополнительные выходные и больничные.
Ежегодные корпоративные выезды за счёт компании.
Возможности профессионального и карьерного роста.
Возможность влиять на технические решения и развитие продукта.
Конкурентоспособный пакет заработной платы.
Будьте осторожны
Если работодатель просит войти в их систему, используя iCloud/Google, прислать код/пароль, запустить код/ПО, не делайте этого. Это мошенники. Обязательно жмите «Пожаловаться» или пишите в поддержку. Подробнее в гайде →