图书介绍

MapReduce作业执行性能优化若干关键技术研究【2025|PDF|Epub|mobi|kindle电子书版本百度云盘下载】

杨雷著著
出版社：沈阳：东北大学出版社
ISBN：9787551711838
出版时间：2015
标注页数：130页
文件大小：20MB
文件页数：139页
主题词：软件工具－程序设计

PDF下载

点此进入-本书在线PDF格式电子书下载【推荐-云解压-方便快捷】直接下载PDF格式图书。移动端-PC端通用
种子下载[BT下载速度快]温馨提示：（请使用BT下载软件FDM进行下载）软件下载地址页直链下载[便捷但速度慢] [在线试读本书] [在线获取解压码]

点击复制MD5值：a65550d976822671416128a85713f1ee

下载说明

MapReduce作业执行性能优化若干关键技术研究PDF格式电子书版下载

下载的文件为RAR压缩包。需要使用解压软件进行解压得到PDF格式图书。

点击复制85GB完整离线版磁力链接到迅雷FDM等BT下载工具进行下载详情点击-查看共享计划

建议使用BT下载工具Free Download Manager进行下载,简称FDM(免费,没有广告,支持多平台）。本站资源全部打包为BT种子。所以需要使用专业的BT下载软件进行下载。如BitComet qBittorrent uTorrent等BT下载工具。迅雷目前由于本站不是热门资源。不推荐使用！后期资源热门了。安装了迅雷也可以迅雷进行下载！

（文件页数要大于标注页数，上中下等多册电子书除外）

注意：本站所有压缩包均有解压码： 点击下载压缩包解压工具

图书目录

第一部分相关研究1

1 绪论1

1.1 研究意义1

1.2 研究现状2

1.2.1 MapReduce作业资源分配2

1.2.2 MapReduce作业数据放置3

1.2.3 MapReduce作业调度算法5

1.3 本章小结8

2 相关技术9

2.1 Hadoop系统架构9

2.2 分布式文件系统10

2.3 MapReduce编程模型12

2.3.1 MapReduce并行编程模型的系统框架12

2.3.2 MapReduce作业执行过程13

2.3.3 MapReduce作业执行示例14

2.4 本章小结16

第二部分 MapReduce作业动态资源分配方法17

3 MapReduce作业动态资源分配框架17

3.1 MapReduce作业动态资源分配问题17

3.2 MapReduce作业动态资源分配框架描述19

3.3 本章小结22

4 MapReduce作业动态资源分配算法23

4.1 作业资源需求变化事件感知23

4.2 MapReduce作业Slot资源需求量计算26

4.3 MapReduce作业动态资源分配数学模型及求解30

4.4 实验对比及分析34

4.4.1 实验环境34

4.4.2 实验方案及对比35

4.5 本章小结38

第三部分关联感知的MapReduce作业数据放置方法39

5 基于数据块间作业访问关联性的数据放置算法39

5.1 问题定义39

5.2 算法模型41

.5.2.1 数据块间作业访问关联关系表示模型构建41

5.2.2 作业访问关联数据块放置算法45

5.3 实验分析50

5.3.1 实验环境50

5.3.2 实验方案及结果51

5.4 本章小结53

6 基于join访问关联性的多输入文件数据放置算法54

6.1 问题定义54

6.2 算法模型56

6.2.1 数据块间join访问关联关系表示模型构建56

6.2.2 具有join访问关联关系的数据块放置问题数学模型及求解算法57

6.3 实验分析59

6.4 本章小结60

第四部分多MapReduce作业合并调度方法61

7 合并调度框架61

7.1 问题描述61

7.2 框架描述65

7.3 本章小结69

8 面向共享读的多MapReduce作业合并算法70

8.1 问题定义70

8.2 算法模型76

8.3 实验分析80

8.3.1 实验环境80

8.3.2 实验方案及结果82

8.4 本章小结85

9 面向共享Map输出的多MapReduce作业合并算法86

9.1 MapReduce作业数据处理流程86

9.2 面向共享Map输出的多MapReduce作业合并问题描述88

9.3 面向共享Map输出的中间数据量估计90

9.4 算法模型91

9.5 实验分析93

9.6 本章小结95

第五部分考虑虚拟机间性能互扰的MapReduce作业调度方法96

10 考虑虚拟机间性能互扰的MapReduce作业调度框架96

10.1 目前主流的MapReduce作业调度方法分析96

10.1.1 FIFO调度96

10.1.2 HOD调度97

10.1.3 公平调度97

10.1.4 计算能力调度98

10.2 虚拟机环境MapReduce作业调度面临的问题99

10.3 考虑虚拟机间性能互扰的MapReduce作业调度方法框架描述102

10.4 本章小结104

11 虚拟机间性能互扰度量方法105

11.1 虚拟机间性能互扰度量模型构建105

11.2 实验分析110

11.3 本章小结113

12 考虑虚拟机间性能互扰的MapReduce作业调度机制114

12.1 下一时间间隔空闲槽计算算法115

12.1.1 MapReduce作业调度心跳机制115

12.1.2 基于任务执行进度的任务剩余执行时间估计116

12.1.3 基于任务剩余执行时间的下一时间间隔空闲槽计算算法117

12.2 MapReduce作业全局优化调度算法118

12.2.1 问题描述119

12.2.2 算法描述120

12.3 实验分析121

12.4 本章小结123

参考文献124