本书以任务为载体，以实施过程为主线，将知识点穿插到任务实施过程中，知识体系的构建循序渐进、由易到难、由浅入深，符合普遍认知规律。 本书以Hadoop大数据平台为中心，主要内容包括预备知识、准备Hadoop环境、搭建Hadoop大数据平台、使用Java语言编写MapReduce程序、使用Python语言编写MapReduce程序、Hadoop系统的常见故障及应对和Hadoop系统运维。 本书适合作为各类高等职业院校大数据技术及相关专业的教材，也可以作为大数据爱好者的自学参考用书。 为便于教学，本书配有电子资源，选择本书作为授课教材的教师可登录机械工业出版社教育服务网（www.cmpedu.com）免费注册后进行下载或联系编辑（010-88379194）咨询。本书还配有二维码，读者可直接扫描二维码观看微课视频。

职业院校教师

目 录
前言
二维码索引
1
任务1　安装和配置VirtualBox虚拟机2
任务2　在VirtualBox中安装Ubuntu虚拟机7
任务3　安装和配置远程连接工具Xshell15
任务4　安装和配置文件传输工具Xftp21
任务5　使用Linux25
33
任务1　配置JDK34
任务2　配置SSH免密码登录37
任务3　配置Hadoop文件和目录结构42
48
任务1　配置Hadoop单机模式49
任务2　配置Hadoop伪分布模式54
任务3　配置Hadoop集群模式67
任务4　安装ZooKeeper组件80
任务5　配置Hadoop高可用模式87
任务6　使用HDFS98
任务7　Hadoop调优103
任务8　安装Hive数据仓库107
任务9　搭建Spark计算平台116
129
任务1　安装与配置Maven本地仓库130
任务2　配置IDEA编程环境136
任务３　编写第一个Java应用程序143
任务4　编写Hadoop经典程序WordCount153
任务5　分析通信基站数据1162
167
任务1　运行WordCount案例168
任务2　分析母婴产品销售数据177
任务3　分析通信基站数据2184
194
任务1　分析Hadoop系统日志结构195
任务2　排除硬件故障200
任务3　Hadoop系统的隐私安全202
任务4　Hadoop系统的未来203
204
任务1　用Ambari搭建Hadoop及生态组件205
任务2　动态增加和删除Hadoop节点226
任务3　从SecondaryNameNode恢复NameNode231
任务4　安装和配置Zabbix236
任务5　使用Ansible执行简单任务246
任务6　使用Ansible部署Hadoop集群255
任务7　安装与应用Docker258
任务8　使用Docker部署Hadoop集群264
270