上传文件到HDFS时，如何正确指定源文件和目标目录？

当您需要使用 `hadoop fs -put` 命令上传文件到HDFS（Hadoop Distributed File System）时，命令的一般格式如下：

hadoop fs -put [选项] <本地文件路径> <HDFS目标路径>

正确的指定步骤包括：

1. **本地文件路径**：这是你想要上传的文件在您的本地文件系统的完整路径，例如 `C:\Users\username\Documents\myFile.txt` 或 `/home/user/myFile.txt`。

2. **HDFS目标路径**：这是在HDFS上存放文件的新位置，包括域名、端口、存储集群名（如 "shiyan"）、目录结构等，比如 `hdfs://<namenode主机>:<端口号>/shiyan/LBS/test/myFile.txt`。这里的 `<namenode主机>` 通常是运行Hadoop NameNode服务的机器地址。

确保在执行该操作之前，已经通过 `-fs` 选项指定了默认的HDFS文件系统，或者配置了正确的 `fs.defaultFS` 属性。同时，如果文件夹不存在，`-mkdir -p` 命令可以用于创建所需的目录结构。

如果你在指定路径时遇到问题，可能需要检查网络连接、文件权限以及HDFS集群的状态。

相关问题

hadoop上传本地文件显示No such file or directory

### Hadoop上传本地文件时遇到的'No such file or directory'错误解决方案

当尝试通过Hadoop命令上传本地文件至分布式文件系统(HDFS)并遭遇`No such file or directory`错误时，通常意味着指定路径下的源文件不存在或是目标目录不可访问。为了有效处理这一情况：

确认本地文件确实存在于所给定的路径下，并且该路径对于执行操作的用户具有读取权限[^1]。

确保用于指向HDFS的目标位置正确无误，同时验证Namenode是否处于安全模式之中；如果是，则需利用特定指令退出此状态以便继续其他操作，例如可以使用 `bin/hdfs dfsadmin -safemode leave` 来解除安全模式限制。

另外，在配置环境变量时要保证$HADOOP_HOME/bin已加入PATH中，从而允许直接调用hadoop命令而无需提供完整路径[^2]。

最后，检查是否有足够的磁盘空间可用以及网络连接稳定正常，因为这些因素也可能间接影响到文件传输过程中的表现[^3]。

# 验证本地文件存在性及其可读性
ls -l /path/to/localfile.txt 

# 尝试上传前先查看namenode状态
bin/hdfs dfsadmin -report

# 如果namenode处于safe mode则离开它
bin/hdfs dfsadmin -safemode leave  

# 使用put命令上传文件到HDFS
bin/hdfs dfs -put /path/to/localfile.txt /user/username/