Тестировщик (QA) AI-продуктов

Обязанности:

- Ручное тестирование UI, API, промтов на всех продуктах линейки (веб-платформ и RAG-агентов)

- Тестирование REST API (создание коллекций тест-кейсов, расширение и поддержка)

- Проверка качества и корректности контента, сгенерированного LLM: соответствие входным данным и первоисточникам, поиск некорректных/выдуманных фактов, проверка edge-кейсов промптов

- Регрессионное тестирование

- Составление тест-кейсов, чек-листов и понятных баг-репортов

- Приоритизация найденных багов по критичности, взаимодействие с разработчиком по фиксам

Требования:

- Коммерческий опыт ручного тестирования от 1 года в тестировании веб-сервисов (API, UI)

- Тестирование API: глубокое знание REST, HTTP, авторизации; инструменты Postman/Swagger;

- Тестирование AI-агентов:

- Понимание LLM, RAG, векторных БД, промпт-инжиниринга.

- Оценка качества ответов: релевантность, отсутствие галлюцинаций, безопасность, adversarial-тесты (prompt injection).

- Умение тестировать недетерминированное поведение и память агентов.

- Тест-дизайн и документация: уверенное применение классов эквивалентности, граничных значений, сценарных проверок; составление тест-планов, чек-листов, баг-репортов.

- Самостоятельность, ответственность за результат, умение взаимодействовать с командой, умение в многозадачность

Будет плюсом

- Опыт/знакомство со сферой охраны труда и промбезопасности

- Нагрузочное тестирование AI-сервисов

- Опыт A/B-тестирования промптов и моделей.

- Опыт автоматизации тестирования (Playwright/pytest) - сейчас не требуется, но это точка роста в команде

Условия

- Полностью удалённо

- Частичная занятость, ~20 часов в неделю, гибкий график

- Оформление - самозанятость