ИССЛЕДОВАНИЕ И АНАЛИЗ ПОДХОДОВ К ОРГАНИЗАЦИИ ПАРАЛЛЕЛЬНЫХ ВЫЧИСЛЕНИЙ В РАСПРЕДЕЛЕННЫХ СИСТЕМАХ
Дата на публикуване
19.06.2020
Издател
Федеральное государственное бюджетное образовательное учреждение высшего образования «Пензенский государственный технологический университет»
Име на изданието
XXI век: итоги прошлого и проблемы настоящего плюс, № 2(50) 19.06.2020
DOI
10.46548/21vek-2020-0950-0018
Автор(и)
Синев Михаил Петрович - Пензенский государственный университет
Мартышкин Алексей Иванович - Пензенский государственный технологический университет
Трокоз Дмитрий Анатольевич - Пензенский государственный технологический университет
Анотация(ии)
Работа посвящена исследованию и анализу возможных подходов к организации параллельных вычислений в распределенных вычислительных системах. В ходе работы над статьей проанализированы основные подходы к организации параллельных вычислений на распределенных системах. Рассмотрены современные методы организации таких систем, их положительные и отрицательные стороны, а также теоретическая и реальная производительность. Проведены оценки метрик эффективности распределенных и параллельных систем, на примере закона Амадала. Приведено описание архитектуры вычислительного кластера, основанне на инфраструктуре облачного сервиса. Поведен ряд экспериментов, оценивающих эффективность построенной системы. Проведен ряд тестов, оценивающих производительность кластера для алгоритмов wordcount и sort. Анализ полученных результатов показал, что spark может эффективно использовать распределенные вычисления, сравнимые с теоретической производительностью по закону Амдала от 90% вплоть до 97,5% доли задачи возможной для распараллеливания. В рамках анализа возможной оценки производительности не алгоритмической части, отвечающий за запись/чтение принято решение о невозможности объективной оценки данного компонента распределенного вычисления. Кроме того, определена ключевая метрика эффективности работы кластера, а именно общее время проведения распределенного вычисления.
Пълен текст на статията
| Синев.pdf |
|---|