Верификация программного обеспечения. Виды тестирования

Agenda

Классификация видов тестирования
Agile Testing Quadrants
Ещё несколько определений
Практика

Классификация видов тестирования:

По знанию внутренностей системы
По объекту тестирования
По субъекту тестирования
По времени

1. По знанию внутренностей системы

Тестирование черного ящика (Black Box Testing)
Тестирование серого

1.1. Тестирование чёрного ящика

Black Box (closed box, opaque box, behavioral) Testing
Тестировщик

1.2. Тестирование белого ящика

White (Glass box, structural) Box Testing
Противоположность методу

1.3. Тестирование серого ящика

Grey Box Testing
Подход сочетает в себе как белый,

2. По объекту тестирования

Функциональное тестирование
Тестирование пользовательского интерфейса
Тестирование локализации
Тестирование скорости и надежности
Тестирование

2.1. Функциональное тестирование

Один из процессов жизненного цикла программного продукта
Проверяет соответствие

2.1. Функциональное тестирование

Преимущества функционального тестирования:
имитирует фактическое использование системы;
Недостатки функционального тестирования:
возможность

Non-functional testing

Non-functional testing is the testing of a software application

2.2. Тестирование пользовательского интерфейса

Для стандартных объектов UI
Text box
Text area
Numeric field
Drop

2.3. Тестирование локализации

Тестирование локализации – это различные проверки, связанные с адаптацией

2.4. Тестирование скорости и надёжности

Это тестирование для определения времени задержки в

2.4. Тестирование скорости и надёжности

Тестирование скорости и надежности можно разделить на:

Load testing

A type of performance testing conducted to evaluate the behavior

Stress testing

A type of performance testing conducted to evaluate a system

Volume testing

Задачей объемного тестирования является получение оценки производительности при увеличении объемов

Stability testing

Задачей тестирования стабильности (надежности) является проверка работоспособности приложения при длительном

2.5. Тестирование безопасности

Целью тестирования безопасности является определение правильности ограничения доступа

Тестирование контроля доступа
Тестирование авторизации пользователей
Тестирование валидации ввода
Тестирование надежности

2.6. Тестирование удобства использования

Usability testing оценивает приложение с точки зрения конечного

Внешний вид экранов и меню, функций помощи, стиля иконок, расположение их

2.6. Usability testing. Assessment

efficiency
accuracy
recall
emotional response

2.7. Тестирование совместимости

Тестирование на совместимость (compatibility testing) проводится для проверки того,

2.8. Инсталляционное тестирование

Режимы инсталляционного тестирования (installation testing):
Install
Uninstall or Remove
Modify (Add/Remove components)
Repair
Upgrade

2.9. Тестирование документации

Цель тестирования документации – определение, насколько точна, полна, достоверна

3. По субъекту тестирования

Альфа-тестирование
Проводится сотрудниками компании
Бета-тестирование
Вид тестирования, который

4. По времени проведения тестирования

Тест приемки (Smoke test)
Тестирование новых функций
Регрессионное тестирование
Тест

Smoke test

Короткий тест, проверяющий основную функциональность программного продукта и его работоспособность,

New feature testing

Целью является проверка того, что новая функциональность работает корректно

Regression testing

Регрессионное тестирование – повторное проведение тестов для проверки того,

Full regression test

Полный регрессионный тест включает в себя все ранее уже

Sanity testing

Узконаправленное тестирование, достаточное для доказательства того, что конкретная функция работает

Acceptance testing

Приёмо-сдаточное тестирование - это набор тестов, по которому осуществляется

Maintenance testing

Тестирование системы во время ее эксплуатации

5. По критерию позитивности сценариев

Позитивное тестирование
Негативное тестирование

Позитивное тестирование

Класс тестов, которые проверяют, что программа делает то, что должна

Негативное тестирование

Класс тестов, которые проверяют, что программа НЕ делает то, что

6. По степени изолированности компонент

Модульное тестирование (unit)
Компонентное тестирование (component)
Интеграционное тестирование

Unit testing

Тестирование на самом нижнем уровне (unit – часть исходного кода,

Component testing

Тестирование отдельных компонентов (модулей) общей системы

Integration testing

Тестируется взаимодействие отдельных модулей между собой (In the small)

Bottom Up Integration (снизу вверх)
Top down integration (сверху вниз)
“Big bang” integration

System testing

Тестирование системы в целом для обнаружения общих системных багов,

7. По автоматизированности системы

Ручное
Автоматизированное
Смешанное\полуавтоматическое

Ручное

Выполняется без привлечения средств автоматизации
Выполняется, обычно, по подготовленным тест кейсам

Автоматизированное тестирование

Выполняется с использованием специализированных программных продуктов
Требуется высокая квалификация

Смешанное/полуавтоматическое

8. По подготовленности к тестированию

Тестирование по тест кейсам (documented testing)
Интуитивное тестирование

Documented testing

Тестирование по уже разработанной тестовой документации
Выполняемые тесты определены заранее

Ad hoc testing

Тестирование может происходить без сценария, когда тестировщик бессистемно

Agile Testing Quadrants (ATQ)

TDD

Верификация (Verification)

Верификация – процесс проверки того что любой созданный проектом артефакт

Валидация (Validation)

Валидация – процесс проверки того что продукт или его компоненты

Verification & Validation

Практика

Протестировать карандаш, распределить кейсы по видам тестирования.

Классификация видов тестирования:

По знанию внутренностей системы
По объекту тестирования
По субъекту тестирования
По времени