Среда обработки больших данных Апаш
Вес товара: ~0.7 кг. Указан усредненный вес, который может отличаться от фактического. Не включен в цену, оплачивается при получении.
Описание товара
В последние годы структура обработки больших данных, представленная Apache Spark, широко использовалась в академической и промышленности.Эта книга основана на основе Apache Spark.Эта книга разделена на 9 глав, в основном, включая четыре части.D Основные знания в рамках структуры обработки больших данных (глава D1 ～ 2): ввести основные концепции, архитектуру системы, модель программирования, связанные исследовательские работы по структуре обработки больших данных и используйте типичное приложение Spark в качестве примера Описать выполнение процесса выполнения приложения Spark.D Основная теория двухпартийной основы обработки больших данных Spark Spark (D3 ～ 4): введите структуру Spark для общего процесса и методов применения применения в процесс логической обработки, а затем преобразуйте его в параллельный План исполнения исполнения.D Три -частя типичные приложения Spark (D5): введите итеративные приложения Spark Machine Learning и вычислительные приложения MAP.D Четыре части механизма производительности и гарантирования надежности структуры и надежности.
Каталог
Глава D 1 Обзор структуры обработки больших данных ...................
1.1 Большие данные и проблемы, которые он приносит ...
1.2 Структура обработки больших данных ...
1.3 Приложение больших данных и модель программирования ............... 4
1.4 Четырехслойная структура структуры обработки больших данных ........... 5
1.4.1 Пользовательский слой ...
1.4.2 Распределенные данные Параллельные обработки .............. 11
1.4.3 Управление ресурсами и слой планирования задач ......... 13
1.4.4 Уровень физического исполнения ...
1.5 Механизм устойчивости к неправильному утилизации ...............................................................................................
1.6 Другие рамки обработки больших данных ...
1.7 Сводка этой главы ...
1.8 Чтение расширения ...
Глава D 2 Основной процесс развертывания и работы применения системы Spark ...
2.1 Развертывание установки Spark ...
2.2 Архитектура Spark System ...
2.3 Пример приложения Spark ...
2.3.1 Основная логика кода пользователя ...
2.3.2. Процесс логической обработки ...
2.3.3 План физического исполнения ...
2.3.4 Процесс выполнения визуализации ...
2.4 Spark программирования модели ...
2.5 Сводка этой главы ...
Глава D 3 Процесс обработки логики Spark ................. 41
3.1 Обзор процесса обработки логики искры .......... 41
3.2 Метод генерации процесса обработки логики искры ... 43
3.2.1 В зависимости от того, как приложение создает RDD и какой вид RDD генерируется ...
3.2.2 Как установить зависимости данных между RDD ... .... 44
3.2.3 Как вычислить данные в RDD ... 49
3.3 Работа данных общего преобразования () .... 50
3.4 Операция данных общего действия () ...
3.5 Сравнение MapReduce, преимущества и недостатки искры ... ....... 98
3.6 Сводка этой главы ...
3.7 Чтение расширения ...
Глава D 4 План исполнения физики Spark ................. 101
4.1 Обзор плана физического исполнения зажарий .......... 101
4.2 Метод генерации физического плана физического исполнения ... 105
4.3 План физического выполнения, сгенерированный с помощью обычно используемой операции данных ... ...... 113
4.4 Сводка этой главы ...
4.5 Чтение расширения ...
D 5 章 迭代型 Spark 应用 .................... 123
5.1 Классификация и характеристики итеративного приложения Spark ... ...... 123
5.2 Идентификационное приложение машинного обучения Sparklr ... 124
5.2.1 Описание заявления ...
5.2.2 Принцип алгоритма ...
5.2.3 На основе реализации параллелизации Spark ... 129
5.2.4 Обсудите в -depth ...
5.3 Итеративное приложение машинного обучения——
5.3.1 Принцип алгоритма ...
5.3.2 На основе реализации параллелизации искры ... 136
5.3.3 Обсудите в -depth ...
5.4 Приложение расчета диаграммы IDOU -типа—&-Рейтинг страницы.................................140
5.4.1 Описание заявления ...
5.4.2 на основе реализации параллелизации Spark ... 143
5.4.3 Обсудите в -depth ...
5.5 Сводка этой главы ...
Глава D 6 Механизм перетасовки .......................... 153