Hadoop 2.x 集群安装指南
需积分: 10 183 浏览量
更新于2024-07-21
收藏 2.54MB DOCX 举报
Hadoop 2.x 安装指南
Hadoop 是一个基于 Java 的分布式计算框架,可以处理大量数据的存储和处理。Hadoop 2.x 是 Hadoop 的一个主要版本,具有高性能、可靠性和可扩展性等特点。下面是 Hadoop 2.x 的安装指南。
**安装准备**
1. 安装包准备:Hadoop 2.7.1 安装包(hadoop-2.7.1.tar.gz)和 JDK 1.8 安装包(jdk-8u45-linux-x64.rpm);
2. 操作系统准备:CentOS-6.4 安装包。
**安装步骤概述**
1. 安装 CentOS-6.4 系统;
2. 安装 JDK 1.8;
3. 编译 Hadoop 2.7.1 文件(如果使用 64 位机器);
4. 安装 ZooKeeper(单机安装和集群安装);
5. 关闭 Linux 防火墙,安装已经编译好的 Hadoop 安装包,配置 QJM 或者 HighAvailabilityWithNFS,验证 Hadoop 是否安装成功;
6. 安装 Sqoop;
7. 安装 MySQL;
8. 安装 HBase;
9. 安装 Hive。
**集群规划**
在安装 Hadoop 之前,需要进行集群规划,确定集群的拓扑结构、节点配置和数据存储方式等。
**安装具体步骤**
**4.1 安装 CentOS-6.4 系统**
1. 下载 64 位的 CentOS-6.4 镜像文件(CentOS-6.4-x86_64-bin-DVD1.iso);
2. 使用光盘刻录软件将 ISO 镜像文件刻录在 CD 或者 DVD 光盘里得到一张安装光盘;
3. 安装 CentOS:
* 使用安装介质启动电脑,出现如下界面,选择 Install or upgrade an existing system,并跳过 media test;
* 出现引导界面,点击 next;
* 语言选择,选“English”,以防止出现乱码;
* 键盘布局选择:U.S.English;
* 选择“Basic Storage Devices”,点击 next;
* 询问是否忽略所有数据,新电脑安装系统选择"Yes, discard any data";
* Hostname 填写;
* 网络设置安装图示顺序点击就可以了;
* 时区可以在地图上点击,选择“shanghai”并取消 System clock uses UTC 前面的对勾;
* 设置 root 的密码;
* 硬盘分区,一定要按照图示点选;
* 调整分区,必须要有 /home 这个分区,如果没有这个分区,安装部分软件会出现不能安装的问题;
* 询问是否格式化分区;
* 将更改写入到硬盘;
* 引导程序安装位置;
* 选择安装模式选择 Minimal Desktop 安装。
**Hadoop 安装**
1. 安装 Hadoop 2.7.1:编译 Hadoop 2.7.1 文件,然后安装已经编译好的 Hadoop 安装包,配置 QJM 或者 HighAvailabilityWithNFS,验证 Hadoop 是否安装成功;
2. 安装 ZooKeeper:单机安装和集群安装;
3. 安装 Sqoop;
4. 安装 MySQL;
5. 安装 HBase;
6. 安装 Hive。
**总结**
Hadoop 2.x 的安装需要准备好安装包、操作系统和 JDK,然后按照安装步骤进行安装,最后进行集群规划和配置,以确保 Hadoop 安装成功。
2017-08-11 上传
2015-08-20 上传
点击了解资源详情
点击了解资源详情
点击了解资源详情
点击了解资源详情
点击了解资源详情
点击了解资源详情
点击了解资源详情
![](https://profile-avatar.csdnimg.cn/38d98fe91470425fb57ba748d0b01550_flood_dragon.jpg!1)
Flood_Dragon
- 粉丝: 56
- 资源: 12
最新资源
- 计算机人脸表情动画技术发展综述
- 关系数据库的关键字搜索技术综述:模型、架构与未来趋势
- 迭代自适应逆滤波在语音情感识别中的应用
- 概念知识树在旅游领域智能分析中的应用
- 构建is-a层次与OWL本体集成:理论与算法
- 基于语义元的相似度计算方法研究:改进与有效性验证
- 网格梯度多密度聚类算法:去噪与高效聚类
- 网格服务工作流动态调度算法PGSWA研究
- 突发事件连锁反应网络模型与应急预警分析
- BA网络上的病毒营销与网站推广仿真研究
- 离散HSMM故障预测模型:有效提升系统状态预测
- 煤矿安全评价:信息融合与可拓理论的应用
- 多维度Petri网工作流模型MD_WFN:统一建模与应用研究
- 面向过程追踪的知识安全描述方法
- 基于收益的软件过程资源调度优化策略
- 多核环境下基于数据流Java的Web服务器优化实现提升性能