Мастер-класс на конференции HappyDev 2015

1. Нагрузочное
тестирование с MZBench
Вадим Литвинов,
MachineZone

2. Подготовка
Скачайте образ VirtualBox
Логин: root Пароль: нету

3. Архитектура
MZBench

4. Компоненты
Тестируемая
система
MZBench
API server
CLI
Cloud
controller

5. Запуск
Тестируемая
система
MZBench
API server
CLI
Cloud
controller
HTTP Get
Status
Allocate

6. Провизионинг
Тестируемая
система
MZBench
API server
CLI
Cloud
controllerStatus
Provision
Provision
Provision

7. Работа
Тестируемая
система
MZBench
API server
CLI
Cloud
controller
Director Node
Node
Status
Load
Load
Status

8. Завершение
Тестируемая
система
MZBench
API server
CLI
Cloud
controllerStatus
Deallocate

9. Локальный запуск
Cloud controller: dummycloud_plugin
Все компоненты на одной машине:
MZBench server
Director
Node

10. Первые шаги

11. Запуск сервера
cd ~/mzbench
./bin/mzbench start_server
Зайдите на http://localhost:4800

12. Запуск сценария
./bin/mzbench start ./examples/
ramp.erl
Можно так-же использовать кнопку
«New» в dashboard

13. Компоненты бенча
Бенчмарк состоит из двух
компонентов:
worker - Набор функций для
доступа к трестируемому сервису
сценарий - описывает конкретный
бенчмарк

14. Сценарий
Сценарий описывается Erlang-подобным языком:
[{pool, [
{size, 3},
{worker_type, dummy_worker}
], [
{loop, [{time, {5, min}}, {rate, {1, rps}}],
[
{print, «Foo»}
]
}
]}].

15. Пишем воркера

16. simple_http_worker
Рассмотрим файл:
~/mzbench/workers/simple_http/
src/simple_http_worker.erl

17. Структура
initial_state() - начальное
состояние
metrics() - Объявление метрик
Функции воркера

18. Начальное состояние
initial_state() -> [].

19. Метрики
metrics() ->
[
[
{"http_ok", counter},
{"http_fail", counter},
{"other_fail", counter}
],
{"latency", histogram}
].

20. Функции
get(State, _Meta, URL) ->
StartTime = os:timestamp(),
Response = hackney:request(get, list_to_binary(URL), [], <<"">>, []),
case Response of
{ok, _, _, BodyRef} -> hackney:skip_body(BodyRef);
_ -> ok
end,
Latency = timer:now_diff(os:timestamp(), StartTime),
mzb_metrics:notify({"latency", histogram}, Latency),
case Response of
{ok, 200, _, _} ->
mzb_metrics:notify({"http_ok", counter}, 1);
{ok, _, _, _} = Reply ->
lager:error("GET failed: ~p", [Reply]),
mzb_metrics:notify({"http_fail", counter}, 1);
E ->
lager:error("hackney:request failed: ~p", [E]),
mzb_metrics:notify({"other_fail", counter}, 1)
end,
{nil, State}.

21. python_http_worker
Листинг доступных шаблонов:
~/mzbench/bin/mzbench list_templates
Создание нового воркера:
~/mzbench/bin/mzbench new_worker --
template=python_empty python_http

22. python_http_worker
Валидация сценария:
~/mzbench/bin/mzbench validate
examples/python_http.erl
Локальный запуск:
~/mzbench/bin/mzbench run_local
examples/python_http.erl

23. python_http_worker
В начале examples/python_http.erl:
{make_install, [{git, «/root/
python_http»}]},
Создаем репозитарий:
git init
git add —all
git commit -m «Initial commit»

24. Пишем сами!
Задача: Написать HTTP воркера на Python
Как сделать HTTP реквест:
import requests
r = requests.get(«url»)
r.status_code == 200
Как посчитать время:
import time
start = time.clock()
time.clock() - start
Бонус: Выставлять URL отдельной функцией

25. Пишем сценарии

26. Базовый сценарий
[
{make_install, [{git, «/root/python_http"}]},
{pool, [
{size, 3},
{worker_type, python_http, python}
],
[
{loop, [
{time, {3, min}},
{rate, {1, rps}}
], [
{get, "http://localhost:4800"}
]}
]}
].

27. Параметризация
{var, <Name> [, <DefValue>]} - строковая
переменная;
{numvar, <Name> [, <DefValue>]} - численная
переменная;
Использование: mzbench start --env <Name> =
<Value>

28. Практика
Замените параметрами:
Количество воркеров
Длительность сценария
Скорость
Цель
Бонус: Поиграйтесь с mzbench change_env

29. Циклы
Скорость не обязана быть
константной:
{ramp, linear, <Start>, <Stop>} -
Линейное изменение от <Start> до
<Stop>
{comb, <Rate1>, <Time1>, <Rate2>,
<Time2>} - Скорость <Rate1> в
течении <Time1>, потом скорость
<Time2> и т.д.

30. Ресурсы
Внешний файл (например json):
[«url1», «url2», «url3»]
Импортируем в сценарий:
{include_resource, <Name>, «<File>»,
json}
Используем:
{resource, <Name>}

31. Практика
Отправлять запросы по случайному
URL из списка:
{choose, <List>} - возвращает
случайный элемент из списка
Бонус: Поиграть со скоростью