Глоссарий QA и автоматизации тестирования
Короткие определения ключевых терминов — от тест‑кейса и flaky до pass‑rate и тестирования LLM.
Тест‑кейс
Последовательность шагов, проверяющая конкретное поведение приложения. В Aiomant тип платформы задаётся на уровне шага, поэтому Web, API, Mobile и LLM можно комбинировать в одном кейсе.
Сьют
Набор тест‑кейсов, которые запускаются вместе — например, регрессия перед релизом.
Сценарий
Группа связанных шагов или кейсов, описывающая пользовательский путь целиком.
Flaky‑тест
Нестабильный тест, который то проходит, то падает без изменений в коде. Aiomant помечает такие тесты по истории прогонов.
Pass‑rate
Доля успешных прогонов за период. Ключевая метрика здоровья тестов на дашборде отчётов.
Регрессионное тестирование
Проверка, что новые изменения не сломали ранее работавшую функциональность.
Data‑driven тестирование
Запуск одного кейса на множестве наборов данных (датасетов) без дублирования шагов.
Smoke‑тест
Быстрая проверка, что ключевые функции работают, перед более глубоким тестированием.
Локатор
Способ найти элемент на экране (по id, тексту, XPath). Устойчивые локаторы снижают хрупкость тестов.
Агент
Исполнитель тестов Aiomant — в облаке или в вашей инфраструктуре. Прогоны распределяются по агентам параллельно.
On‑premise
Развёртывание в вашем контуре через Docker — данные и секреты не покидают инфраструктуру.
Тестирование LLM
Автоматическая проверка ответов языковых моделей: соответствие ожиданию, отсутствие галлюцинаций, формат и тон.
Готовы автоматизировать тестирование?
Покажем Aiomant на вашем проекте, поможем с on‑premise и перенесём существующие тесты.