Data Analyst (AI Safety)

TL;DR

Дата-аналитик (AI Safety): Анализ пользовательских сценариев и качества работы LLM/AI-ассистентов с акцентом на безопасность и эффективность фильтров. Фокус на построении метрик качества, проверке гипотез и подготовке аналитических выводов для улучшения AI-сервисов.

Локация: Удаленно (РФ)

Компания

Объединенная технологическая компания Wildberries и Russ, лидер рынка электронной коммерции и наружной рекламы.

Что делать

• Анализировать запросы и ответы LLM/AI-ассистентов, выявляя ошибки и паттерны поведения.
• Строить и развивать метрики качества и безопасности AI-сервисов.
• Исследовать эффективность guardrails, фильтров и классификаторов.
• Формулировать гипотезы по улучшению пользовательского опыта и безопасности.
• Готовить дашборды и отчеты для продуктовых, ML/DS и инженерных команд.
• Участвовать в оценке качества внутренних AI-агентов для задач ИБ.

Требования

• Опыт работы аналитиком от 2 лет.
• Уверенное владение SQL и Python для анализа данных.
• Навыки проведения исследований и проверки гипотез.
• Опыт работы с неструктурированными данными: логами, текстовыми событиями и ручной разметкой.

Культура и преимущества

• Корпоративный пакет ДМС со стоматологией и консультации психолога.
• Обучение в корпоративном университете и языковые клубы.
• Гибкий подход к работе и забота о балансе карьеры и личной жизни.
• Развитая корпоративная культура: спортивные сообщества, клубы по интересам.
• Скидки на обучение, страхование и партнерские программы.