Senior QA Automation Engineer (Generative AI)

TL;DR

Senior QA Automation Engineer (Generative AI): Тестирование и оценка AI-продуктов на базе LLM и Computer Vision с акцентом на создание evaluation pipelines и анализ данных. Фокус на определении quality gates, борьбе с галлюцинациями и обеспечении безопасности агентных AI-систем.

Локация: Офис в Ташкенте, Узбекистан

Компания

Ipoteka Bank OTP Group — часть одной из ведущих европейских банковских групп Центральной и Восточной Европы.

Что делать

• Проводить ручное и автоматизированное тестирование AI-продуктов, включая функциональное и регрессионное тестирование.
• Разрабатывать evaluation pipelines для LLM и Computer Vision решений, проверяя точность, релевантность и безопасность ответов.
• Подготавливать, очищать и структурировать тестовые датасеты, формируя golden datasets и наборы edge-cases.
• Декомпозировать задачи команды на user stories и управлять бэклогом в Jira в рамках Scrum-процессов.
• Тестировать агентные AI-системы и многошаговые workflow с использованием инструментов Claude Code, Cursor и аналогов.

Требования

• От 3 лет опыта в Software QA с коммерческим опытом ручного и автоматизированного тестирования.
• Владение Python, SQL и фреймворками тестовой автоматизации.
• Понимание процессов CI/CD и навыков визуализации данных.
• Опыт работы с Jira и по методологии Agile/Scrum.
• Языковые требования: Русский (C1), Английский (B2), Узбекский (B2).
• Локация: Обязательное присутствие в Ташкенте.

Хорошо, если есть

• Опыт работы с LLM, Generative AI и prompt testing.
• Знание принципов MLOps / LLMOps.
• Опыт тестирования разговорного и агентного AI.
• Опыт работы в банках или финтехе.

Культура и преимущества

• Медицинская страховка (ДМС) для каждого сотрудника.
• 21 день оплачиваемого отпуска.
• Специальные условия по банковским продуктам для персонала.
• Бесплатный доступ к курсам LinkedIn Learning, Coursera, Udemy.
• Возможность профессионального роста в международной команде.