Вопрос: Является ли Amazon EC2 надежным для бенчмаркинга?


Я переосмыслил перестрелка компилятора и я начал задаваться вопросом: есть ли Amazon EC подходит для бенчмаркинга? Окружающая среда полностью виртуальна, поэтому есть ли гарантии, что результаты сравнительного анализа будут повторяемы? Или я должен предположить, что срез времени виртуальной хостинговой среды мешает подходам синхронизации?


5
2018-05-07 18:12


Источник




Ответы:


Нет.

Не то, что это ошибка EC2, но при бенчмаркинге при сравнении A и B нужно иметь в виду фразу «все равны», (Для этого есть формальное название, но я забываю.) С виртуализированной средой EC2, где вы не контролируете ничего но ваш экземпляр, это просто не так.

Если вы не сравниваете облачные среды;)

(Отредактировано специально для EC2, благодаря знающим комментариям)


1
2018-05-07 18:48



с / визуализировали / виртуализированная - jldugger
Я не думаю, что облачные вычисления обязательно означают невозможность предложить строгим гарантам о доступности. Вероятно, главная проблема заключается в том, что НЕ дает процессорную интенсивность VM медленнее. - jldugger
en.wikipedia.org/wiki/Ceteris_paribus - jldugger
Достаточно честно, ребята. Я буду квалифицировать свой ответ как особый EC2. Я провела сравнительный анализ на EC2, в основном ориентированный на пропускную способность и время отклика, и был удивлен, насколько переменны. Все вещи не равны. - Stu Thompson
@jldugger: exit 0 - Stu Thompson


В бенчмаркинге вы хотите контролировать все переменные, которые вы можете обеспечить для правильного тестирования. В среде облачных вычислений я бы не стал верить, что данный экземпляр будет точно таким же, от одного момента до следующего, достаточным для надежной проверки производительности.


0
2018-05-07 18:33