hadoop分布式安装
时间: 2023-08-22 19:11:20 浏览: 75
Hadoop分布式安装的步骤如下:
1. 在hadoop1上搭建伪分布式,并安装hadoop集群的所有进程。根据分布式规划,需要关闭SecondaryNameNode和ResourceManager进程。在hadoop1上执行以下命令:
```
chkconfig hadoop-hdfs-secondarynamenode off
chkconfig hadoop-yarn-resourcemanager off
```
\[1\]
2. 在所有主机上进行配置。可以在一台主机上配置完后,将配置文件复制到其他主机。配置文件位于`/root/hadoop-2.6.0-cdh5.10.1/etc/hadoop`目录下。打开`core-site.xml`文件,配置`fs.defaultFS`属性为`hdfs://hadoop1:8020`,表示HDFS的访问入口。
```
<configuration>
<property>
<name>fs.defaultFS</name>
<value>hdfs://hadoop1:8020</value>
</property>
</configuration>
```
\[2\]
3. 将配置好的Hadoop复制到其他两台机器上。在三台机器上安装rsync远程同步工具:
```
yum install -y rsync
```
然后将Hadoop发送到hadoop102和hadoop103机器上:
```
rsync -av /opt/modules/hadoop-3.2.4 root@hadoop102:/opt/modules/
rsync -av /opt/modules/hadoop-3.2.4 root@hadoop103:/opt/modules/
```
\[3\]
以上是Hadoop分布式安装的主要步骤。根据具体情况,可能还需要进行其他配置和调整。
#### 引用[.reference_title]
- *1* *2* [Hadoop分布式安装(超详细)](https://blog.csdn.net/qq_43667449/article/details/108751410)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v91^control_2,239^v3^insert_chatgpt"}} ] [.reference_item]
- *3* [Hadoop完全分布式安装,全网最详细!](https://blog.csdn.net/weixin_53492344/article/details/129566924)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v91^control_2,239^v3^insert_chatgpt"}} ] [.reference_item]
[ .reference_list ]
相关推荐
![docx](https://img-home.csdnimg.cn/images/20210720083331.png)
![zip](https://img-home.csdnimg.cn/images/20210720083736.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)