Hadoop安装配置HDFS
时间: 2023-09-21 11:10:39 浏览: 124
Hadoop是一个分布式计算框架,它的核心是分布式存储系统HDFS。以下是Hadoop安装配置HDFS的步骤:
1. 下载Hadoop并解压缩。
2. 在Hadoop的conf文件夹中,编辑core-site.xml文件,配置HDFS的默认文件系统。例如:
```
<configuration>
<property>
<name>fs.defaultFS</name>
<value>hdfs://localhost:9000</value>
</property>
</configuration>
```
这个配置告诉HDFS,文件系统的默认地址是localhost:9000。
3. 编辑hdfs-site.xml文件,配置HDFS的数据存储路径。例如:
```
<configuration>
<property>
<name>dfs.replication</name>
<value>1</value>
</property>
<property>
<name>dfs.namenode.name.dir</name>
<value>/usr/local/hadoop_store/hdfs/namenode</value>
</property>
<property>
<name>dfs.datanode.data.dir</name>
<value>/usr/local/hadoop_store/hdfs/datanode</value>
</property>
</configuration>
```
其中,dfs.replication表示副本数,dfs.namenode.name.dir表示namenode的数据存储路径,dfs.datanode.data.dir表示datanode的数据存储路径。
4. 格式化namenode,执行以下命令:
```
bin/hdfs namenode -format
```
5. 启动HDFS,执行以下命令:
```
sbin/start-dfs.sh
```
6. 验证HDFS是否启动成功,执行以下命令:
```
jps
```
如果看到NameNode、DataNode、SecondaryNameNode等进程,说明HDFS已经成功启动。
阅读全文
相关推荐
![pdf](https://img-home.csdnimg.cn/images/20241231044930.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![docx](https://img-home.csdnimg.cn/images/20241231044901.png)
![docx](https://img-home.csdnimg.cn/images/20241231044901.png)
![rar](https://img-home.csdnimg.cn/images/20241231044955.png)
![zip](https://img-home.csdnimg.cn/images/20241231045053.png)
![-](https://img-home.csdnimg.cn/images/20241231044901.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![docx](https://img-home.csdnimg.cn/images/20241231044901.png)
![zip](https://img-home.csdnimg.cn/images/20241231045053.png)
![pdf](https://img-home.csdnimg.cn/images/20241231044930.png)
![-](https://img-home.csdnimg.cn/images/20241231044901.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)