Hadoop 2.6.0全分布式安装教程:单NameNode部署
5星 · 超过95%的资源 需积分: 9 186 浏览量
更新于2024-09-10
收藏 9KB TXT 举报
本文将详细介绍如何在全分布模式下安装Hadoop 2.6.0版本,针对一个基于VMware Workstation 10的CentOS-6.5 x86_64环境进行设置。首先,确保虚拟机支持64位操作系统,并启用虚拟化技术。集群配置包含一个单一的NameNode和两个DataNodes,它们的IP地址分别为192.168.120.10、192.168.120.11和192.168.120.12。
在安装步骤中,首先创建Hadoop用户(hadoop)并将其与组hadoop关联,然后修改/etc/hosts文件以添加集群节点的主机名和IP映射,以便于SSH通信。接着,通过生成SSH密钥对来强化安全连接,将公钥添加到NameNode的authorized_keys文件中,确保无密码登录。
在Hadoop用户(hadoop)的bash_profile文件中,设置了必要的环境变量,如JAVA_HOME指向安装的JDK 1.8.0_40路径,JAR_HOME指向下层JRE目录,HADOOP_HOME为Hadoop 2.6.0的安装路径,以及CLASSPATH,以便系统能够正确识别Java工具和库。
本文的核心知识点包括:
1. **环境准备**:VMware Workstation 10及CentOS-6.5 x86_64环境的配置,虚拟化技术的启用。
2. **集群配置**:单一NameNode和双DataNode的部署,IP地址的设置。
3. **用户管理**:创建Hadoop用户和组,以及SSH密钥对的生成和授权。
4. **环境变量设置**:JAVA_HOME、JAR_HOME、HADOOP_HOME和CLASSPATH的配置,确保Hadoop运行所需的环境一致性。
遵循这些步骤,读者可以顺利地在自己的环境中搭建一个Hadoop 2.6.0全分布模式的集群。
639 浏览量
632 浏览量
1353 浏览量
232 浏览量
2018-01-12 上传
117 浏览量
179 浏览量
176 浏览量
151 浏览量
varchar2aix
- 粉丝: 0
- 资源: 1
最新资源
- 天涯部落版主工具 龙网天涯部落版主工具 v1.2
- rpyc:RPyC(远程Python调用)-用于python的透明和对称RPC库
- shopproject
- 欧美风格主机模板
- doodad:用于 docker、EC2、GCP 等的作业启动库
- 深度学习
- e_commerce-endpoint-rest:电子商务的宁静HATEOAS端点
- STM32 ST-LINK Utility v4.2.0 stlink升级固件.rar
- node-usb:改进的Node.js USB库
- 导出表格,及批量删除.zip
- 行业分类-设备装置-一种抗水防破抗氧化书画纸.zip
- QPD:量子囚徒的困境
- EnumSerialComs:使用 Windows 注册表信息来识别串行 COM 设备-matlab开发
- airmash-frontend:上次官方Airmash应用程序的“半原始”副本
- 服装店收银系统 七彩服装收银系统 v3.2 网络版
- Demo_image-video:托管的演示图像