Стресс тесты для сервера

Чем протестировать железо сервера

Любой сервер, новый, бывший в употреблении или Refurbished, для опытного сисадмина — это всегда кот в мешке. Новый сервер мог быть произведен с браком (даже лидеры отрасли от этого не застрахованы), в восстановленном что-то могли пропустить при восстановлении, бывший в употреблении и вовсе может быть поломан.

Поэтому стресс-тест — это самая необходимая процедура после приемки железа. Даже если внешне и внутренне сервер выглядит, как рабочий, даже если его произвели вчера, он может сломаться уже завтра — и нужно сразу же по получении его протестировать!

Мы всегда тестируем сервер перед отправкой, но с пониманием относимся к желанию наших клиентов все равно перепроверить его после нас. Поэтому если перед вами встал вопрос, чем протестировать железо сервера, то вот небольшая статья о разных способах.

Основа любого стресс-теста — загрузка. Сервер отличается от обычного компьютера тем, что рассчитан на работу без перебоев с большей нагрузкой в течение большего количества времени. Так что загрузить его на ночь, на сутки, а то и на целую неделю вместе со всеми комплектующими, чтобы проверить на работоспособность — милое дело.

Естественно, любая крупная и серьезная компания отрасли имеет собственный софт для диагностики, стресс-теста и удаленного управления оборудованием, часто его наличие даже является решающим аргументом при выборе того или иного сервера.

Однако существуют программы стресс-тестов и в отрыве от производителей железа. Так на Linux, Unix, FreeBSD, и OpenBSD для тестирования подсистемы ввода-вывода, процессора, памяти можно воспользоваться двумя инструментами:

Простым генератором рабочего стресса систем POSIX, который так и называется — Stress. С его помощью можно задавать определенное рабочее напряжение для всех вышеперечисленных систем.

Обновленной его формой, Stress-ng. С помощью инструмента можно создавать и прекращать процессы, переключать контекст, тестировать привод и синхронизировать ввод-вывод в дополнение к ЦПУ и кэшу.

В других случаях можно воспользоваться специализированными программами для стресс-тестов. Пример — Breakin Hardware Diagnostics, программа, нагружающая процессор и память на 100%, а также тестирующая диски на наличие ошибок SMART.

Источник

Лучшие инструменты для стресс-тестирования серверов

Очень важно, чтобы все наши устройства работали исправно. На каждом компьютере могут быть сложности, уязвимости и ошибки, которые могут повлиять на производительность. Мы также должны учитывать имеющиеся у них ограничения и знать, в какой степени мы можем выполнить определенную задачу при использовании компьютера, сервера или любого устройства. В этой статье мы собираемся показать некоторые инструменты для тестирования емкость сервера , Серии стресс-тесты с помощью которого мы узнаем, как далеко продвинулось наше устройство, и, таким образом, узнаем, нужно ли нам приобрести новое или иметь возможность каким-либо образом его улучшить.

Оптимизация производительности, что важно для серверов

Когда мы собираемся настроить сервер либо для частного использования, либо когда мы говорим о компании или организации, очень важно, чтобы она работала правильно. У нас должна быть команда, которая действительно выполняет свою функцию, у которой есть необходимые функции и характеристики.

Иногда нам придется провести серию Конфигурации или точная настройка, чтобы это произошло. У нас могут быть определенные ограничения для серверов, которые мы используем, поскольку это зависит от оборудования, которое у них есть, а также от того, как мы его оптимизировали.

Это делает очень важной оптимизацию производительности сервера. И для этого мы сможем использовать различные инструменты, которые сообщат нам, насколько они работают хорошо, оптимальна ли производительность или нам следует внести какие-то изменения.

Проверить мощность сервера

Сегодня у нас есть инструменты практически для всего. У нас есть широкий спектр возможностей для тестирования наших систем, тестирования нашего соединения, а также для проведения атак на наши устройства, чтобы убедиться в адекватности безопасности. Мы увидим несколько программ для тестирования наших серверов.

Иперф

Один из самых популярных инструментов — Иперф . У него есть разные версии, такие как Iperf 2, который сегодня устарел, а также Iperf 3, который является самым последним и который мы можем использовать. Он используется для тестирования компьютерных сетей и измерения производительности. Это позволит измерить пропускную способность этой сети и сервера. Он использует протоколы TCP и UDP, позволяет изменять количество одновременных потоков данных и изменять определенные параметры.

Иперф — это мультиплатформенный инструмент . Мы можем использовать его в основных операционных системах, таких как WindowsMacOS или Linux. Это программа, которая работает через командную строку, поэтому она больше ориентирована на более опытных пользователей.

Однако у нас может быть графическая версия, которую мы можем использовать в Linux и Windows. Это Jperf, и в данном случае он основан на Java. Мы можем получить доступ к исходному коду и загрузить программу через GitHub .

Томагавк

Еще один инструмент, который мы также можем использовать на основе командной строки и с помощью которого можно протестировать наш сервер, — это Томагавк . Это очень мощный вариант, который, несомненно, поможет максимально увеличить нагрузку на сервер.

Имейте в виду, что мы всегда должны использовать этот тип инструмента в контролируемой среде для проведения тестов. Мы можем поставить под угрозу функционирование серверов и даже заставить их перестать работать.

Кроме того, Томагавк также может протестировать блокирующая способность НИПС путем моделирования встроенных атак. Он сообщит, была ли атака завершена или заблокирована, поэтому мы можем проверить, действительно ли она работает.

На его Официальный сайт мы можем найти всю информацию и ссылки для скачивания с различными версиями.

Hping3

В Hping3 мы найдем интересный инструмент для выполнения DoS-атаки на Linux . Он работает через терминал и позволит анализировать пакеты TCP / IP. Он улучшает функцию традиционного пинга, с помощью которого мы можем отправлять пакеты и обнаруживать возможные сбои.

В этом случае мы сможем отправлять пакеты TCP, UDP и RAW-IP . Кроме того, как и в предыдущем случае, его можно использовать в целях безопасности, чтобы иметь возможность обнаруживать проблемы на нашем сервере и исправлять их как можно скорее, чтобы предотвратить их использование третьими лицами.

Мы можем проверить, например, эффективность брандмауэр. Для этого мы можем использовать разные протоколы, обнаруживать подозрительные пакеты или те, которые были изменены. Это также защитит наш сервер от DoS-атак.

В настоящее время Hping3 поставляется в виде Kali Linux инструмент, который является одним из самых популярных дистрибутивов Linux для этичного взлома.

Httperf

Еще один инструмент, который мы хотим показать, — это Httperf . Это еще один стресс-тест, который мы можем использовать для наших серверов, чтобы проверить их и выяснить, в какой степени они могут работать правильно. Что вы собираетесь сделать, так это отправить большое количество HTTP-запросов и таким образом проверить правильность производительности и иметь возможность оптимизировать ее, когда это возможно.

И снова мы сталкиваемся с полностью бесплатным инструментом с открытым исходным кодом. Мы можем скачать его через GitHub и протестируем его на нашем компьютере с Linux. Еще один вариант, который стоит рассмотреть, чтобы улучшить сервер.

Осада

У нас также есть возможность Осада . Снова ваша миссия — проводить различные тесты на серверах. Цель состоит в том, чтобы повысить производительность, улучшить работу сервера и уменьшить любые проблемы, которые могут возникнуть.

Этот инструмент доступен для Linux, и мы можем найти его в некоторых из самых популярных дистрибутивов. Стресс-тест через HTTP или HTTPS. Мы можем найти все необходимая документация использовать это.

Короче говоря, это несколько интересных инструментов, которые мы можем использовать для проведения различных стресс-тестов на наших серверах. Таким образом мы сможем максимально повысить производительность и снизить риск возникновения проблем, которые могут повлиять на нас. Всегда важно убедиться, что наше оборудование работает должным образом, особенно когда речь идет о таких чувствительных устройствах, как серверы, которые должны предлагать функции другому подключенному оборудованию, и любая ошибка может повлиять на нас.

Источник

Стресс-тестирование серверов с помощью stress-ng

Стресс-тестирование удобно использовать и для облачных и для физических серверов. Если вы работаете в облаках, вы сможете понять реальную пропускную способность узла. Если разворачиваете систему на физическом железе — сможете убедиться, что с железом все в порядке.

В .io мы используем более 100 физических серверов (кроме облачных) для обслуживания системы хранения и обработки статистики. Мы иногда сталкиваемся с багами даже на новых серверах. Проблемы могут быть разными — кулер на процессоре, из-за чего процессор во время работы может переходить в режим throttling (искусственное понижение частоты). Диск с багами (один из двух в RAID’e). Либо еще какая-нибудь муть.

Стресс-тест позволяет сгенерировать нагрузку на все ключевые подсистемы сервера. Это дает возможность убедиться, что все компоненты работают нормально.

Инструменты для стресс-тестов

Инструментов для стресс тестирования есть целая куча, мы остановились на stress-ng (мы используем Ubuntu в качестве ОСи).

Обратите внимание, что стресс-тест — это внутренний тест. В отличие от инструментов нагрузочного тестирования, например ab , стресс-тесты не заключаются в генерации запросов к внешним сервисам.

Инструмент устанавливается из пакетов:

apt-get install stress-ng

Для запуска стресс-теста необходимо выбрать тип теста и указать его параметры.

Тестирование CPU

Прежде всего мы захотим проверить работу процессора.

# проводим тест процессора в 8 потоков

В этом тесте stress-ng выполнит разные тесты из группы cpu в 8 потоков (т.к. у нас 8 ядер), каждый длительностью в 60 секунд. Для тестирования будут последовательно использованы различные методы (например, подсчет общего наибольшего делителя или функции Аккермана). Будут выполняться не только математические операции, а и сортировки, шифрование, сжатие, поиск, работа со строками и т.п.

Во время тестов все ядра будут максимально загружены (результат htop ):

После теста мы увидим статистику выполнения всех 22х тестов процессора:

# показатели после выполнения теста

Статистика будет включать название теста и цифры по скорости выполнения операций. Абсолютные величины особого значения не имеют. Однако их стоит сравнивать с цифрами серверов аналогичной конфигурации. Особенно цифры в колонках bogo ops/s .

Тестирование оперативной памяти

Для оперативной памяти есть группа тестов, куда входят операции выделения, копирования и очистки памяти. Кроме этого, в этот набор входят некоторые тесты из класса cpu . Например, тест компрессии и сортировки.

# группа тестов для оперативной памяти

Во время этого теста будем наблюдать другую картинку — большое количество оперативной памяти (и свопа) будет занято:

После окончания увидим резюме пройденных тестов:

# показатели после выполнения теста

Тестирование дисков

Тут есть две группы тестов, которые стоит выполнить. Сначала – группа тестирования низкого уровня I/O устройств:

Эта группа тестов включает создание/удаление файлов, запись блоков в файлы и синхронизацию данных в файлах с диском. Результат работы тестов:

Кроме этого имеет смысл запустить стресс-тест файловой системы. Он включает создание/удаление файлов и папок, перемещение по дереву файлов, создание ссылок, блокировки, переименование и т.п.

Во время тестирования дисковой подсистемы, можно наблюдать нагрузку на диск с помощью утилиты iostat :

# Покажет статистику работы дисков за последние 5 секунд

Результат выполнения тестов файловой системы:

Используйте инструменты стресс-тестирования, чтобы проверить работу железа и понять его реальную производительность. stress-ng – удобный инструмент для тестирования серверов на Ubuntu. Если нужно просто выполнить все тесты, используйте команду:

# Выполнит более 40 различных стресс-тестов сервера

Во время выполнения тестов комп лучше не трогать. После выполнения статистика будет выведена прямо в консоли.

Highload нужны авторы технических текстов. Вы наш человек, если разбираетесь в разработке, знаете языки программирования и умеете просто писать о сложном!
Откликнуться на вакансию можно здесь .

Источник

Нагрузочное тестирование производительности вашего сайта

И снова здравствуйте. В июле Otus запускает новый курс «Нагрузочное тестирование». В преддверии старта курса традиционно делимся с вами полезным материалом.

Поскольку 5 миллиардов человек во всем мире самоизолируются, все больше и больше наших ежедневных взаимодействий происходят через интернет. Ритейлеры по всему миру переводят обслуживание своих клиентов из офисов в онлайн, школы и учебные заведения пытаются находить альтернативы в интернете, и даже общение в кругу семьи переносится на Zoom и Webex вместе с нашими рабочими встречами (с детьми и домашними животными на фоне).

В отличие от более устоявшихся пиков интернет-трафика, таких как Черная пятница или День святого Валентина, у интернет-сайтов попросту не было месяцев на подготовку своих сайтов ко всему этому интернет-трафику. Несмотря на отсутствие предсказательного фактора, тестирование производительности имеет решающее значение, если вы хотите, чтобы ваш бизнес работал в эти нестабильные времена.

Для тех из вас, кто ищет ответы на вопросы о том, как тестировать производительность вашего сайта, чтобы правильно подготовиться к предстоящим неделям, вот 8 советов, которые мы вынесли из работы с нашими клиентами по нагрузочному тестированию за последние 10 лет.

Лучшие советы для успешного тестирования производительности

1. Запускайте нагрузочные тесты из производственной среды

Это единственный способ гарантировать, что ваше тестирование является точным и что каждый пункт проверен правильно. Мы рекомендуем вам выбирать время, когда вы ожидаете низкий трафик, и моделировать нагрузки из нескольких географических местоположений и сред.

2. Масштабируйте свои тесты от маленького к большому и далее к огромному

Если вы очень спешите протестировать большой наплыв пользователей, вы можете случайно пропустить уровень нагрузки, на котором у вас в данный момент могут быть проблемы, потому что вы пропустили слишком много уровней одновременно. Разгоняйтесь понемногу, а затем наращивайте свои тесты все больше и больше. Перед каждым тестом останавливайтесь, чтобы отслеживать результаты, и убедитесь, что вы удовлетворены ими, прежде чем переходить на следующий уровень. В BlazeMeter мы начинаем с отладочного тестирования, которое выполняется как функциональный тест, просто чтобы убедиться, что тест выполняет то, что вы хотите чтобы он выполнял. Затем мы проводим калибровочные испытания. Эта калибровка проводится, чтобы убедиться, что тестовая платформа, на которой выполняется тестирование, на самом деле не является узким местом. Теперь мы можем перейти к гвоздю программы: тестированию производительности. Начните тестирование с 10% целевой нагрузки и постепенно увеличивайте до полной целевой нагрузки. Убедитесь, что разгон постепенный, чтобы вы могли контролировать симптомы.

Вы также можете запустить тестирование всплесков нагрузки, чтобы проверить, как ваша система реагирует на внезапный скачок числа пользователей и как она восстанавливается. Мы также рекомендуем довести вашу систему до предельной нагрузки, даже если она превышает целевое число пользователей, чтобы вы были осведомлены о реакции вашей системы.

Вот как может выглядеть узкое место. Число попаданий/с падает, а время отклика резко возрастает:

3. Запланируйте тесты

Также вы можете планировать, как выполнять ваши бизнес-цели. Вместе с вашей командой определите, какие тесты вам нужны. Вот типы тестов, которые вы можете запустить:

Нагрузочные тесты — нагрузочные тесты предназначены для определения поведения системы при ожидаемой нагрузке.

Стресс-тесты — стресс-тесты могут помочь вам понять пределы прочности системы.

Тестирование выносливости — используются для проверки способности системы выдерживать постоянную ожидаемую нагрузку.

Тестирование всплесков нагрузки — поможет вам проверить способность системы выдерживать резкие и быстрые нагрузки.

Изоляционный тест — это повторный тест для проверки, была ли устранена известная системная ошибка или проблема, ранее обнаруженная в этом же тесте.

Возьмите свои бизнес-цели, а также свои знания о том, где ваш продукт работает лучше, а где не очень, и подберите для них подходящие тесты. Выполняя эти тесты, помните о следующих 2 целях:

• Найти критические места. Исследуйте свою систему, чтобы выяснить, в чем заключаются ее слабые стороны и почему. Настройте информационные панели мониторинга предупреждений для этих критических мест.
• Разделите свою систему и протестируйте каждый элемент по отдельности. Не все части вашей системы будут получать одинаковую нагрузку и характер трафика. Определите различные возможности и слабые места и примите активные меры.

4. Мониторинг внутренних результатов нагрузочного теста

Нагрузочное тестирование позволяет просматривать и анализировать KPI производительности, такие как время отклика и латентность, а также корреляции между ними. Но также важно просмотреть ключевые показатели эффективности, такие как Cache Hits и DB Queries, просмотреть лог ошибок на предмет исключений, а также просмотреть стандартные характеристики оборудования, такие как загрузка ЦП/памяти/сети и состояние автоматического масштабирования.

Различные решения расширяют возможности анализа результатов испытаний. DX APM, New Relic, App Dynamics и другие решения обеспечивают мониторинг производительности приложений и мониторинг конечных пользователей, а Amazon Cloud Watch отслеживает облачные ресурсы AWS.

5. Включите отслеживание производительности конечного пользователя в бэкэнд-тестирование

Автоматический или вручную анализируйте то, что испытывают ваши пользователи, благодаря уникальной функции BlazeMeter — мониторингу опыта конечных пользователей. Новые возможности функционального тестирования выполняют тест Selenium в фоновом режиме, пока выполняется нагрузочный тест, через Taurus. Тест Selenium создает Waterfall Report, который показывает, что пользователь будет видеть в своем веб-браузере в разные моменты во время нагрузочного теста. Это может быть особенно полезно при отладке, например, из-за того, что определенная страница не была загружена должным образом с точки зрения пользователя в определенный момент нагрузочного теста.

6. Настройте резервные серверы и локации

Сбои могут случиться даже с Бейонсе (ну ладно, не с Бейонсе). Создавая резервные серверы и локации, вы можете быть уверены, что готовы продолжать предоставлять услуги в очень короткие сроки.

7. Проверьте ваши сторонние интеграции

Когда вы вносите изменения в свое приложение или сайт, вы не просто влияете на свой собственный продукт. Вы также можете влиять на сторонние сценарии в своем приложении или на сайте или же можете вызвать сбой сторонних устройств и серверов, если не подготовите их должным образом. Например, для разных CDN требуются разные подходы, а для балансировки нагрузки AWS (ELB) требуется прогрев перед балансировкой.

Несмотря на то, что это является частью того, что вы тестируете, мы рекомендуем вам заранее связаться с вашими партнерами и провести все необходимые приготовления. Это гарантирует, что нагрузочный тест будет учитывать их подготовку и полные возможности (вместо частичных возможностей, как это может случиться, если у них не будет возможности подготовиться). Это также экономит ваше время и усилия, так как вам не нужно решать распространенные проблемы на стороне, которые можно было бы легко исправить.

8. Внедрить мониторинг API

После того, как вы закончите тестирование, вам все равно захочется узнать, как ваш сайт ведет себя «в дикой природе». Вы можете использовать возможности функционала BlazeMeter 360 Degree Monitoring для мониторинга ваших критически важных API-интерфейсов в производственной среде, чтобы убедиться, что ваш веб-сайт или приложение функционируют должным образом. Он будет служить системой предупреждения, чтобы вы знали, когда ваша система работает не так, как от нее ожидают.

Хотите прокачать свое тестирование? Подпишитесь на бесплатную онлайн-аккредитацию в университете BlazeMeter здесь.

Готовы начать тестирование производительности вашего сайта? Вы можете бесплатно воспользоваться платформой непрерывного тестирования BlazeMeter и начать тестирование своего сайта в ближайшие несколько минут. Зарегистрируйтесь здесь, чтобы начать тестирование.

Источник