Тестирование как средство противодействия внешнему хаосу Никита Налютин

Как мы хотели бы тестировать?

Как оно бывает на самом деле?

Менеджер
проекта

Аналитик

Разработчик

Дизайнер

Тестировщик

Где все хорошо?

Requirements and technical concepts for aviation RTCA DO-178B
Процессы:
Планирование
Разработка
Верификация
Управление конфигурациями
Управление качеством
Взаимодействие с

Уровни критичности

Тестировщик внутри процесса

Переработка упорядоченного входа в упорядоченный выход

Требования

Релизы

Тесты

Дефекты

Сроки

Стандарты

Когда заканчиваем?

Фаза кончилась
Деньги кончились
Покрыли 100% требований
Покрыли 75% кода
Автоматизировали 70% тестов

Когда выпускаем?

Дефекты

Чем хорошо?

Сроки – управляемые
Процесс – есть
Зрелость коллектива – несомненно

Чем плохо?

Окружающая среда

☹ Зона внутреннего хаоса

Сроки

Релизы

Требования

Стандарты???

Тесты

Дефекты

Код

Главный вопрос жизни, вселенной и всего такого
Как работать в агрессивной среде

42!
Структурировать!
Время: GTD
Информацию о системе: конфигурации
Быстрые оценки состояния: диаграммы

Зона внутреннего порядка

Как бороться?

INBOX

Информация о системе

Сроки

Релизы

Код

Тесты/дефекты

Рабочие процессы

Оценки/отчеты

Время

☹Планирование времени

☺Упорядочение времени: почти GTD

Надо срочно!
Наброски критических тест-кейсов
Сразу баг-репорты
Задача на спокойный период

☺Распределяем верхушки айсберга

срочно!

сегодня

на неделе

Анализ и исследование

Сценарии тестов

Тест-требования

Дефекты

Рабочие заметки

Привязка к структуре системы

Автоматизация

Мы

Информация о системе

☹Управление конфигурациями

Конфигурация документов

Архитектура

Руководство пользователя

План проекта

Система

?Управление конфигурациями

☺Упорядоченные конфигурации

Важно!
Один объект входит во множество конфигураций
Источники информации:
Внешние (требования) – непредсказуемы,

☺Упорядоченные конфигурации

Внешние источники
Дают статическую информацию
Надо «подшивать», образуя структурированные описания системы
Тестировщик –

☺Workflow все-таки есть

Отчеты о состоянии

☹Вычисление состояния

Объект конфигураци

Объекты конфигурации

Состояния объектов

Состояние конфигурации

Принятие решения

Технологическое воздействие

Изменение состояний

Анализ состояния

Вычисление статуса конфигурации

☺Оценка состояния

Состояние должно определяться с первого взгляда
Какие нужны диаграммы?
Календарь приоритетов: календарь
Сколько

Календарь приоритетов
☺
☹

Задача 1

Задача 2

Задача 3

Задача 4

Задача 1

Задача 2

Задача 3

Задача !!!

Задача ???

Пн

Где критические места?

Пузыри должны всплывать, уменьшаясь в размерах
по мере исправления

Сколько осталось

Разработка

Тестирование

Задача 1

Задача 3 (исправление)

Задача 5

Задача 2

Задача 3

Задача 4 (исправление)

Задача 4

Задача

Трудозатраты

Перекос на регрессию – надо автоматизировать

Куда дальше?

Распространить порядок за пределы тестирования
Заинтересовать начальство
Подключить заказчиков к обсуждению проблем