Linux和HDFS常用命令
时间: 2024-12-26 10:27:47 浏览: 4
### 常用的 Linux Shell 和 HDFS 操作命令
#### Linux Shell 命令
对于日常文件管理和系统监控,Linux 提供了一系列强大的 shell 命令:
- **列出目录内容**
- `ls`:用于显示指定工作目录下的内容。可以通过 `-l` 参数来获取更详细的输出。
- **更改目录**
- `cd <directory>`:改变当前的工作目录到 `<directory>`.
- **创建新目录**
- `mkdir <new_directory_name>`:建立名为 `<new_directory_name>` 的新目录。
- **复制文件或目录**
- `cp source destination`:将源路径中的数据拷贝至目标位置;如果目标是一个已存在的文件,则覆盖该文件;如果是目录则会把源放入此目录内。
- **移动或重命名文件/目录**
- `mv old_path new_path`:可以用来移动生成文件或是重新定义其名称。
- **删除文件或空目录**
- `rm file.txt` 或者 `rmdir empty_folder`: 删除单个文件或清空后的文件夹。
- **强制递归删除非空目录及其内部所有项**
- `rm -rf directory_to_remove`
这些只是部分基础指令,在实际应用中有更多高级功能等待探索[^1]。
#### HDFS 操作命令
针对分布式存储需求设计的 Hadoop 文件系统 (HDFS),同样支持通过 CLI 进行管理操作:
- **查看文件列表**
- `hdfs dfs -ls /user/ubuntu` :展示 `/user/ubuntu` 路径下的文件和子目录信息[^2].
- `hdfs dfs -ls -R /path/to/directory` : 对给定路径做深度优先遍历并打印出所有的条目详情。
- **上传本地文件到 HDFS 中**
- `hdfs dfs -put local_file hdfs_location` : 将本地计算机上的文件传输到集群内的特定位置保存起来。
- **下载 HDFS 上的数据回到客户端机器上**
- `hdfs dfs -get hdfs_source local_destination` : 反向过程是从远程节点取回所需资源存放到个人空间里。
- **创建新的远端文件夹**
- `hdfs dfs -mkdir [-p] remote_dirname` : 类似于 Unix/Linux 下 mkdir ,其中可选参数 `-p` 表示即使父级不存在也会自动构建完整的层次关系。
- **移除不需要的对象**
- `hdfs dfs -rm [-r] target_item(s)` : 移走单一项目或者是带有选项 `-r` 来清除整个集合连同它们所含有的任何东西一起销毁掉。
以上列举了一些基本却非常实用的操作指南,帮助用户更好地理解和利用这两个平台特性[^3]。
阅读全文