Перечень типов тестов в данном тестировании

Таблица 12.1 Перечень типов тестов

Критерии успешности проведения тестов

Результаты тестов оцениваются по следующим основным параметрам:

1) Производительность, оп/час

2) Времена отклика для 90% операций, сек.

3) Использование ресурсов системы, %.

Тест считается успешным, если:

1) В процессе тестирования запросы выполнялись с интенсивностью, соответствующей профилю тестирования;

2) Количество успешно выполненных операций составляет более 90%;

3) По окончании теста получены данные по производительности Системы и по использованию системных ресурсов.

4) Зарегистрированы (в случае возникновения) перегрузки и сбои программно-аппаратных средств во время выполнения тестов

5) Зарегистрированы и переданы Разработчику выявленные в ходе тестирования ошибки.

6) Собраны данные для разработки отчета НТ.

Критерии по временам отклика тестируемых операций

Согласно договору на разработку время отклика любой внутренней операции ИС «Спектрум» (в штатном рабочем режиме, без учёта времени ожидания ответа сервисной шины, без учёта сетевого взаимодействия и поиска бизнес-данных) не должно превышать значение 1 сек.. Для операций, в обработке которых участвует эмулятор, время отклика определяется, как сумма времен отклика эмулятора и внутренней операции ИС «Спектрум». Время отклика эмулятора установлено равным 1 сек. Таблица взаимодействия эмулятора и ИС «Спектрум» с расчитанными временами отклика приведена ниже..

Последовательность обмена данными между транзакционным сервисом и эмуляторами и времена отклика