PM Team Leader SQA Days 7 Kharkov QA Club ZoralLabs It-Jam 2010 lysenko_i@mail.ru http:// myqanotes.blogspot.com It-Jam 2011 PO QA. - презентация

Содержание

Слайд 2

Me PM Team Leader SQA Days 7 Kharkov QA Club ZoralLabs

Me

PM

Team Leader

SQA Days 7

Kharkov QA Club

ZoralLabs

It-Jam 2010

It-Jam 2011

PO

QA

Слайд 3

Этапы Проработка и проектирование сценариев Создание и отладка Организация проведения и

Этапы

Проработка и проектирование сценариев
Создание и отладка
Организация проведения и запуск
Анализ и отладка

системы

- от пары минут до пары дней
- дня три, может четыре
- один-три дня и 10-120-500 минут
- от получаса до пары человеконедель

Слайд 4

Этапы …….

Этапы

…….

Слайд 5

Дзен

Дзен

Слайд 6

Предварительно Время отклика Время (календарное) транзакции Код ответа сервера Полный ответ

Предварительно

Время отклика
Время (календарное) транзакции
Код ответа сервера
Полный ответ сервера в случае ошибки
Загрузки

ЦПУ сервера
Загрузка памяти сервера
Загрузка ЦПУ клиента
Загрузка памяти клиента
Кол-во переданных байт
Слайд 7

Предварительно Время Ответы сервера Использование ресурсов сервера Использование ресурсов клиента Передаваемые

Предварительно

Время

Ответы сервера

Использование ресурсов сервера

Использование ресурсов клиента

Передаваемые объемы

На чем будем строить анализ

Слайд 8

Первое

Первое

Слайд 9

Второе

Второе

Слайд 10

Следующее

Следующее

Слайд 11

Анализ результатов Тенденция во времени Распределения времени ответов Декомпозиция Кластеризация Сравнение

Анализ результатов

Тенденция во времени
Распределения времени ответов
Декомпозиция
Кластеризация
Сравнение и поиск зависимостей
Использования памяти
Использования процессора
Задержек

и загрузки БД
Времени и результатов запросов
etc.
Слайд 12

Анализ результатов Кластеризация Сравнение и поиск зависимостей Тенденция во времени Распределение времени ответов Декомпозиция

Анализ результатов

Кластеризация

Сравнение и поиск зависимостей

Тенденция во времени

Распределение времени ответов

Декомпозиция

Слайд 13

Анализ причин Просмотр ответов серверов Просмотр логов История выполнения запросов на

Анализ причин

Просмотр ответов серверов
Просмотр логов
История выполнения запросов на БД
Использование ресурсов сервера
Использование

ресурсов клиента
Использовать не только результаты предоставляемые нагрузочной тулзой
Слайд 14

Анализ причин Результаты Логи Хранилище данных Загрузка ресурсов сервера и клиента Любые другие результаты Ответы сервера

Анализ причин

Результаты

Логи

Хранилище данных

Загрузка ресурсов сервера и клиента

Любые другие результаты

Ответы сервера

Слайд 15

Пример

Пример

Слайд 16

Ошибки и summary

Ошибки и summary

Слайд 17

Отчет об ошибках

Отчет об ошибках

Слайд 18

Response Time Report Over Time

Response Time Report Over Time

Слайд 19

Response Time Report Over Time

Response Time Report Over Time

Слайд 20

Error Summary Report

Error Summary Report

Слайд 21

Response Time Report Over Time

Response Time Report Over Time

Слайд 22

Response Time Over Time Distribution

Response Time Over Time Distribution

Слайд 23

Response Time Distribution of One Request

Response Time Distribution of One Request

Слайд 24

Request Size Distribution

Request Size Distribution

Слайд 25

Слайд 26

Слайд 27

Слайд 28

Hints Собирайте максимум данных (но помните, что это может влиять на

Hints

Собирайте максимум данных
(но помните, что это может влиять на результат)
Анализируйте не

только сами результаты
Лучший источник реальных данных – production server
(не грузите его в prime time)
Копайте как можно глубже
(но не забывайте, что результаты могут лежать и на поверхности)
Слайд 29

Вопросы?

Вопросы?

Слайд 30

Useful Links http://tinyurl.com/fastJMTest http://loadosophia.org

Useful Links

http://tinyurl.com/fastJMTest
http://loadosophia.org