Пья Сон Ко Ко Построение и оптимизация распределенных виртуальных вычислительных систем

Краткое описание

Пья Сон Ко Ко Построение и оптимизация распределенных виртуальных вычислительных систем
ОГЛАВЛЕНИЕ ДИССЕРТАЦИИ
кандидат наук Пья Сон Ко Ко
ВВЕДЕНИЕ

ГЛАВА 1. КЛАССИФИКАЦИЯ РАСПРЕДЕЛЕННЫХ ВЫРТУАЛЬНЫХ ВЫЧИСЛИТЕЛЬНЫХ СИСТЕМ И ВЫСОКОПРОИЗВОДИТЕЛЬНЫХ ВЫЧИСЛЕНИЙ

1.1. ПОНЯТИЕ О ВЫСОКОПРОИЗВОДИТЕЛЬНЫХ ВЫЧИСЛЕНИЯХ

1.1.1.Технологии и системы организации высокопроизводительных вычислений

1.1.2. Современные технологии высокопроизводительных вычислений-------16

1.2. ВИДЫ ВИРТУАЛИЗАИИ

1.2.1. Виртуализация платформ

1.2.2. Ресурсов виртуализации

1.2.3. Виртуализация аппаратного типа

1.3. ПРОЦЕССОРЫ МНОГОЯДЕРНОГО ТИПА «SPARC», «POWER PC», «IBM-POWER», «INTEL» И ЭФФЕКТИВНЫЕ ТЕХНОЛОГИИ, СВЯЗАННЫЕ С МНОГОЯДЕРНОЙ ОБРАБОТКОЙ ИНФОРМАЦИИ

1.4. ПАРАЛЛЕЛЬНЫЕ НАКЛАДНЫЕ РАСХОДЫ И ПАРАЛЛЕЛЬНЫЙ АЛГОРИТМ

1.5. ВЫВОДЫ

ГЛАВА 2. АНАЛИЗ И ОПТИМИЗАЦИЯ РАСПРЕДЕЛЕННЫХ ВЫЧИСЛИТЕЛЬНЫХ СИСТЕМ НА ОСНОВЕ ТЕХНОЛОГИЙ ВИРТУАЛИЗАЦИИ

2.1. СРАВНЕНИЕ ТРАДИЦИОННЫХ АРХИТЕКТУР RISC И OSC С ИСПОЛЬЗОВАНИЕМ РАЗНЫЕ МОДЕЛИ ПАРАЛЛЕЛЬНОГО ПРОГРАММИРОВАНИЯ ЧТОБЫ ВЫБРАТЬ ПЛАТФОРМА ДЛЯ ПОСТРОЕНИЯ ВИРТУАЛЬНЫХ ВЫЧИСЛИТЕЛЬНЫХ СИСТЕМ-------38

2.1.1. Модель параллельного программирования OpenMP

2.1.2. Модель параллельного программирования MPI

2.1.3. Гибридная модель параллельного программирования MPI/OpenMP Гибридный метод

2.2. Тестирование приложение и сравнение производительности

АВТОМАТИЧЕСКОЙ ПАРАЛЛЕЛИЗАЦИИ И OPENMP С ИСПОЛЬЗОВАНИЕМ КОЛИЧЕСТВО ПОТОКОВ НА ПЛАТФОРМЕ SPARC

2.3. СРАВНЕНИЕ ПРОИЗВОДИТЕЛЬНОСТИ СЕТИ НЕСКОЛЬКИХ ВИРТУАЛЬНЫХ МАШИН

2.4. СРАВНЕНИЕ KUBERNETES, КОНТЕЙНЕРЫ И HPC

2.5. Архитектуры виртуальной машины, контейнеры и Docker

2.6. Сравнение ApacheSpark c Hadoop

2.6.1. Краткая история Hadoop

2.6.2. Apache Spark и Ядро Spark

2.7. Тестирование и анализ производительности с использованием Spark и HADOOP ДЛЯ ОБРАБОТКИ БОЛЬШИХ ДАННЫХ

2.8. Тестирование OpenCL и сравнение его с CUDA на платформе GNU/Linux

2.9. выводы

ГЛАВА.3. ИСПОЛЬЗОВАНИЕ ТЕХНОЛОГИИ КОНТЕЙНЕРИЗАЦИИ ДЛЯ ПОСТРОЕНИЯ РАСПРЕДЕЛЕННЫХ ВИРТУАЛЬНЫХ ВЫЧИСЛИТЕЛЬНЫХ СИСТЕМ

3.1. МЕТОДИКА ПОСТРОЕНИЯ КОНТЕЙНЕРНЫХ ПРИЛОЖЕНИЙ С ИСПОЛЬЗОВАНИЕМ

образа Docker

3.2. МЕТОДИКА ПОСТРОЕНИЯ РАСПРЕДЕЛЕННОЙ ВИРТУАЛЬНОЙ ВЫЧИСЛИТЕЛЬНОЙ СИСТЕМЫ С ИСПОЛЬЗОВАНИЕМ ВИРТУАЛЬНЫХ КОНТЕЙНЕРОВ

3.3. НАСТРОЙКА СЕТИ

3.3.1. Назначение уникального IP-адреса каждому модулю

3.3.2. Связь контейнер-контейнер внутри пода

3.3.3. Pod-to-Pod связь внутри ноды

3.3.4. Связь между внешним миром и подами

3.4. ВЫВОДЫ

ГЛАВА.4. КОНСОЛИДАЦИЯ И ИНТЕГРАЦИЯ КОМПЛЕКСА ПРОГРАММНЫХ ПРОДУКТОВ ДЛЯ ПОСТРОЕНИЯ ВИРТУАЛЬНЫХ

ВЫЧИСЛИТЕЛЬНЫХ СИСТЕМ И ЗАПУСК ПРИЛОЖЕНИЯ

4.1. Комплекс программ для создания операционного окружения

ВИРТУАЛЬНЫХ ВЫЧИСЛЕНИЙ

4.2. Запуск MapReduce программ на Hadoop

4.3. Конфигурация Spark в Hadoop

4.4. СРАВНЕНИЕ ВРЕМЕНИ РАБОТЫ PAGERANK С ИСПОЛЬЗОВАНИЕМ SPARK И HADOOP ДЛЯ ОБРАБОТКИ Больших Данных

4.5. Выводы

ЗАКЛЮЧЕНИЕ

СПИСОК СОКРАЩЕНИЙ

СПИСОК ЛИТЕРАТУРЫ

ПРИЛОЖЕНИЕ: А. АКТ О ВНЕДРЕНИИ ПМ-ПУ, СПБГУ

ПРИЛОЖЕНИЕ: Б. АКТ О ВНЕДРЕНИИ ВТ-ИТ, СПБГМТУ

ПРИЛОЖЕНИЕ: В. АЛГОРИТМ PAGERANK НА PYTHON

ПРИЛОЖЕНИЕ: Г. ПАРАЛЛЕЛЬНЫЙ ПРОГРАММ С ИСПОЛЬЗОВАНИЕМ РАЗЛИЧНЫХ МОДЕЛЕЙ

ПРИЛОЖЕНИЕ: Д. ТЕСТИРОВАНИЕ OPENCL НА РАЗНЫХ ПЛАТФОРМАХ