QA Engineer
Сбер2B
AI assistant
Job Description
- Функциональное тестирование frontend, backend и AI-платформы;
- Подготовка тест-планов, тест-кейсов и чек-листов;
- Тестирование REST API и интеграций с внутренними ИТ-системами;
- Тестирование AI-ассистентов, агентских сценариев и работы с документами;
- Проверка качества ответов LLM и RAG;
- Ручная и автоматизированная оценка качества AI с использованием LLM-as-a-Judge;
- Регрессионное, интеграционное и приёмо-сдаточное тестирование;
- Анализ логов, метрик и трассировок (LangFuse, Elasticsearch);
- Воспроизведение и локализация дефектов, взаимодействие с разработчиками при их устранении;
- Участие в развитии процессов тестирования AI-платформы и повышении качества релизов.
- Опыт в QA не менее 3 лет, из них минимум 1 год плотной работы с автоматизацией;
- Понимание принципов тестирования;
- Опыт написания тестов для backend и frontend на фреймворках Pytest, Playwright;
- Понимание