Тестирование производительности

Примеры тестирования производительности

https://sky.pro/wiki/profession/primery-testirovaniya-proizvoditelnosti/

Введение в тестирование производительности

Тестирование производительности — это процесс оценки скорости, устойчивости и масштабируемости системы под различными нагрузками. Оно помогает выявить узкие места и определить, насколько эффективно система справляется с увеличением объема работы. Тестирование производительности включает в себя несколько типов тестов, таких как нагрузочное тестирование, стресс-тестирование и тестирование стабильности.

Основные метрики и показатели

Для успешного тестирования производительности важно понимать ключевые метрики и показатели, которые используются для оценки системы. Эти метрики помогают определить, насколько эффективно система справляется с нагрузкой и где могут возникнуть проблемы.

• Время отклика (Response Time): Время, необходимое для выполнения запроса. Это одна из самых важных метрик, так как она напрямую влияет на пользовательский опыт. Чем меньше время отклика, тем быстрее система реагирует на действия пользователя.
• Пропускная способность (Throughput): Количество транзакций или запросов, обработанных системой за единицу времени. Высокая пропускная способность означает, что система может обрабатывать большое количество запросов одновременно.
• Использование ресурсов (Resource Utilization): Процент использования процессора, памяти, дискового ввода-вывода и сети. Эта метрика помогает определить, насколько эффективно система использует доступные ресурсы.
• Ошибки (Errors): Количество ошибок, возникающих при выполнении запросов. Высокий уровень ошибок может указывать на проблемы с производительностью или стабильностью системы.

Понимание этих метрик позволяет разработчикам и администраторам систем принимать обоснованные решения о том, какие изменения необходимо внести для улучшения производительности. Например, если время отклика слишком велико, может потребоваться оптимизация кода или улучшение аппаратного обеспечения.

Обзор тестирования производительности

https://habr.com/ru/articles/735376/

Операционные профили, профили нагрузки и генераторы нагрузки 

Операционные профили определяют шаблоны, которые пользователь или компонент системы может использовать в системе. Например, тесты производительности могут содержать один или несколько операционных профилей. Чтобы создать операционный профиль, тестировщику необходимо собрать определенную информацию: 

1. Во-первых, получить доступ и определить, какие данные необходимо собрать.
2. Роли и пользователи (администраторы, обычные пользователи, пользователи с уникальными правами). 
3. Определить, какие задачи может потребоваться выполнить пользователю для выполнения конкретной работы.
4. Спросить себя, сколько пользователей для каждой роли обычно получают доступ и используют систему. 

Определить способ сбора данных.

1. Интервьюирование может предоставить необходимые данные. Например, беседа с менеджером продукта может помочь определить шаги пользователя в приложении. 
2. Также может помочь проверка функциональной документации системы. 
3. Анализ предыдущего тестирования производительности поможет определить, какие показатели необходимо оценить. 

После того как все данные собраны, их необходимо оценить, чтобы убедиться в их достаточности.

Профили нагрузки. 

После сбора всей информации об операционном профиле мы можем создать профиль нагрузки. При создании профиля нагрузки тип теста производительности будет определять способ построения профиля. 

Необходимо определить некоторые ключевые термины: 

1. Ramp-up - увеличение нагрузки через регулярные промежутки времени (добавление одного пользователя в минуту). 
2. Ramp-down - снижение нагрузки через регулярные промежутки времени.
3. Steps - немедленное изменение нагрузки (добавление 50 пользователей одновременно каждые 3 минуты). 
4. Predefined Distribution (предопределенное распределение) - определяет конкретный период для использования профиля нагрузки.  

Генератор нагрузки — программное средство, которое генерирует нагрузку на основе предоставленного профиля работы и нагрузки. Примером генератора нагрузки является JMeter. 

Метрики:

Показатели производительности могут варьироваться в зависимости от среды пользователя/заинтересованной стороны. 

Техническая среда (мобильная, веб-приложение и т.д.) 

1. Время отклика 
2. Пропускная способность 
3. Время обработки 
4. Использование ресурсов 

Операционная среда 

1. Время запуска/выключения 
2. Оповещения 
3. Резервное копирование/восстановление 

Бизнес среда 

1. Соглашение об уровне обслуживания (Service Level Agreements) 
2. Пропускная способность
3. Бизнес-процессы (эффективность) 

Одним из наиболее важных аспектов метрик является определение того, какая метрика (метрики) поддерживает цель проекта. Существует такое понятие, как слишком много метрик. Помните, что каждая отслеживаемая метрика требует времени для сбора, анализа и будет использоваться в той или иной форме отчета. После получения результатов может быть хорошей идеей объединить данные, чтобы представить более широкую картину и помочь тем, кто читает отчет, лучше понять его. 

Тестирование производительности

https://ru.wikipedia.org/wiki/Тестирование_производительности

1. Направления тестирования производительности
1. Нагрузочное тестирование
2. Стресс-тестирование
3. Тестирование стабильности
4. Конфигурационное тестирование
2. Определение целей тестирования производительности
1. Параллелизм / Пропускная способность
2. Время ответа сервера
3. Время отображения
4. Требования к производительности
5. Типичные вопросы тестирования производительности
3. Инструментарий
4. Основные показатели (метрики) производительности