基于Ubuntu的Hadoop简易集群安装与配置

HADOOP 集群安装与配

置

[文档副标题]

目录

1 绪论.............................................................................................................................7

2.2.1 HDFS 相关概念..........................................................................................12

2.3 本章小结............................................................................................................13

3 实验环境构建..........................................................................................................13

3.1 运行环境............................................................................................................13

3.2 VMware Workstation 12 Pro 的安装.................................................................13

3.2.1 准备条件.....................................................................................................13

3.2.2 安装截图.....................................................................................................14

3.3 基于 Ubuntu14.04.5 的 Hadoop 集群安装与配置............................................15

3.3.1 安装与配置 JDK.........................................................................................16

3.3.2 安装 SSH 免密登录....................................................................................16

6.4 基本文件命令....................................................................................................35

基于 Ubuntu 的 Hadoop 集群安装与配

置

1、掌握 Hadoop 原理机制，熟悉 Hadoop 集群体系结构、核心技术。

2、安装和配置 Hadoop 集群。

实验的主要内容有如下几点：

1、Jdk 安装：Hadoop 是用 Java 编写的程序，Hadoop 的编译及 MapReduce 的运行都需要

JDK,因此在安装 Hadoop 之前，必须安装 JDK1.6 或更高版本。

2、SSH 免密登录安装设置:Hadoop 需要通过 ssh(安全外壳协议)远程无密码登录,来启动

Slave 列表中各台机器的守护进程，因此 ssh 也是必须安装的。

1.2 国内外研究现状..................................................................................................9

1.3 论文结构............................................................................................................10

2 相关键技术分析......................................................................................................11

2.1 Hadoop 介绍......................................................................................................11

2.2 Hadoop 分布式文件系统 HDFS.......................................................................11

2.2.1 HDFS 相关概念..........................................................................................12

2.3 本章小结............................................................................................................13

3 实验环境构建..........................................................................................................13

3.1 运行环境............................................................................................................13

3.2 VMware Workstation 12 Pro 的安装.................................................................13