Инженер-тестировщик (AI/LLM)

Локация: удалённо, с привязкой к России; офисный вариант — Москва, Кутузовский проспект, 32

Компания

Bell Integrator — крупный системный интегратор, реализующий проекты для финансовых, телекоммуникационных и ритейл-компаний по всей России.

Что делать

• Тестировать AI-агентов для диагностики маркетинговых показателей, поиска взаимосвязей и генерации рекомендаций.
• Проводить функциональное, интеграционное, E2E-, регрессионное и API-тестирование.
• Проверять качество ответов LLM, RAG-пайплайнов и мультиагентных систем, включая выявление галлюцинаций.
• Разрабатывать автотесты на Python с использованием PyTest, Requests/Httpx и async/await.
• Тестировать интеграции через Apache Kafka, настраивать запуск тестов в CI/CD и анализировать логи.
• Взаимодействовать с разработчиками и бизнесом, демонстрировать функциональность и локализовывать дефекты по коду и логам.

Требования

• Опыт работы в тестировании от 2 лет.
• Знание тест-дизайна, тест-кейсов, чек-листов и баг-репортинга; опыт работы с Jira, Confluence и Zephyr.
• Опыт автоматизации на Python, использования PyTest, Requests/Httpx и async/await.
• Знание REST API, Postman, Insomnia, SoapUI, Apache Kafka, PostgreSQL и MySQL; уверенные SQL-запросы с JOIN, подзапросами и агрегациями.
• Понимание LLM, RAG, промпт-инжиниринга, эмбеддингов, метрик качества AI и LLM-as-a-judge.
• Знание Jenkins, GitLab CI/CD, Git/GitLab, Grafana и Kibana/ELK; понимание математической статистики и ML-метрик.

Культура и преимущества

• Удалённый формат работы с возможностью работы из офиса в Москве.
• Оформление по ТК РФ, через ИП или по ГПХ.
• Работа в аккредитованной IT-компании.
• ДМС, корпоративный абонемент на фитнес и курсы английского языка.
• Командная работа по гибким методологиям и реферальная программа.