图书介绍

Hadoop MapReduce性能优化【2025|PDF|Epub|mobi|kindle电子书版本百度云盘下载】

Hadoop MapReduce性能优化
  • （法）坦尼尔著 著
  • 出版社： 北京：人民邮电出版社
  • ISBN：9787115381279
  • 出版时间：2015
  • 标注页数：90页
  • 文件大小：13MB
  • 文件页数：110页
  • 主题词：数据处理软件；软件工具－程序设计

PDF下载


点此进入-本书在线PDF格式电子书下载【推荐-云解压-方便快捷】直接下载PDF格式图书。移动端-PC端通用
种子下载[BT下载速度快]温馨提示：（请使用BT下载软件FDM进行下载）软件下载地址页直链下载[便捷但速度慢]  [在线试读本书]   [在线获取解压码]
点击复制MD5值：70de659aab4d1c2790e52b453bb934e8

下载说明

Hadoop MapReduce性能优化PDF格式电子书版下载

下载的文件为RAR压缩包。需要使用解压软件进行解压得到PDF格式图书。

点击复制85GB完整离线版磁力链接到迅雷FDM等BT下载工具进行下载  详情点击-查看共享计划
建议使用BT下载工具Free Download Manager进行下载,简称FDM(免费,没有广告,支持多平台）。本站资源全部打包为BT种子。所以需要使用专业的BT下载软件进行下载。如BitComet qBittorrent uTorrent等BT下载工具。迅雷目前由于本站不是热门资源。不推荐使用！后期资源热门了。安装了迅雷也可以迅雷进行下载！

（文件页数 要大于 标注页数，上中下等多册电子书除外）

注意：本站所有压缩包均有解压码： 点击下载压缩包解压工具

图书目录

第1章 了解Hadoop MapReduce1

1.1 MapReduce模型1

1.2 Hadoop MapReduce概述3

1.3 Hadoop MapReduce的工作原理4

1.4 影响MapReduce性能的因素5

1.5 小结8

第2章 Hadoop参数概述9

2.1 研究Hadoop参数9

2.1.1 配置文件mapred-site.xml10

2.1.2 配置文件hdfs-site.xml15

2.1.3 配置文件core-site.xml18

2.2 Hadoop MapReduce性能指标19

2.3 性能监测工具20

2.3.1 用Chukwa监测Hadoop21

2.3.2 使用Ganglia监测Hadoop21

2.3.3 使用Nagios监测Hadoop21

2.4 用Apache Ambari监测Hadoop22

2.5 小结23

第3章 检测系统瓶颈25

3.1 性能调优25

3.2 创建性能基线27

3.3 识别资源瓶颈30

3.3.1 识别内存瓶颈30

3.3.2 识别CPU瓶颈31

3.3.3 识别存储瓶颈32

3.3.4 识别网络带宽瓶颈33

3.4 小结34

第4章 识别资源薄弱环节35

4.1 识别集群薄弱环节35

4.1.1 检查Hadoop集群节点的健康状况36

4.1.2 检查输入数据大小37

4.1.3 检查海量I/O和网络阻塞38

4.1.4 检查并发任务不足39

4.1.5 检查CPU过饱和40

4.2 量化Hadoop集群41

4.3 正确配置集群44

4.4 小结47

第5章 强化map和reduce任务49

5.1 强化map任务49

5.1.1 输入数据和块大小的影响51

5.1.2 处置小文件和不可拆分文件51

5.1.3 在Map阶段压缩溢写记录53

5.1.4 计算map任务的吞吐量55

5.2 强化reduce任务57

5.2.1 计算reduce任务的吞吐量58

5.2.2 改善Reduce执行阶段59

5.3 调优map和reduce参数60

5.4 小结64

第6章 优化MapReduce任务65

6.1 使用Combiner65

6.2 使用压缩技术68

6.3 使用正确Writable类型72

6.4 明智地复用类型74

6.5 优化mapper和reducer的代码76

6.6 小结78

第7章 最佳实践与建议81

7.1 硬件调优与操作系统推荐81

7.1.1 Hadoop集群检查表81

7.1.2 Bios调优检查表82

7.1.3 OS配置建议82

7.2 Hadoop最佳实践与建议83

7.2.1 部署Hadoop83

7.2.2 Hadoop调优建议84

7.2.3 使用MapReduce模板类代码86

7.3 小结90

热门推荐