AI QA Engineer (LLM / AI Agents)

#удаленка #внеРФ #remote #vacancy

AI QA Engineer (LLM / AI Agents)

☝️Remote · вне РФ и РБ · разговорный английский


Уровень: Middle / Middle+
Тип: QA для LLM и AI-агентных систем
Часовой пояс: PT (7:00–16:00, Вашингтон)
Локация: вне РФ и РБ
Компания: Web Development Agency

Задачи:

- Тестирование поведения AI-агентов (диалоги, логика, контекст, состояние).

- Выявление и анализ галлюцинаций, отклонений от инструкций и логических ошибок.

- Разработка и поддержка тест-кейсов для LLM-агентов (manual).

- Тестирование интеграций агентов с внешними системами (API, CRM, инструменты).

- Участие в развитии тестовой архитектуры для AI-систем.

Требования

- Опыт в QA (manual) от 2 лет.

- Практический опыт тестирования AI-агентов или чат-ботов.

- Понимание принципов работы LLM-систем, AI-агентов и prompt engineering.

- Умение читать и анализировать код и конфигурации (JSON, логика агентов).

- Умение читать код (Jinja2, JSON, Python).

- Английский язык B2+ (рабочая коммуникация).

Будет плюсом:

- Опыт оценки LLM

Мы предлагаем

-Полностью удалённый формат работы.

-Работу в сильной команде разработчиков, ML-инженеров и AI-специалистов.

-Возможность профессионально расти в QA для LLM- и AI-агентных систем.

-Оплату по квалификации — от 20 USD/час.