HDFS与HBaseShell操作指南

"本文档主要介绍了HDFS和HBaseShell的常用操作命令，包括HDFS的基本文件操作和HBase的数据管理。" 在分布式文件系统HDFS（Hadoop Distributed File System）中，以下是一些基本的命令操作： 1. **上传文件**：`hadoop fs -put /local/hdfs` 将本地文件系统中的`/local/hdfs`文件或目录上传到HDFS。 2. **下载文件**：`hadoop dfs -get /hdfs/local` 将HDFS上的`/hdfs/local`文件或目录下载到本地。 3. **列出目录**：`hadoop dfs -ls /hdfsDir` 查看HDFS上`/hdfsDir`目录的内容。 4. **删除文件**：`hadoop dfs -rmr /hdfs` 删除HDFS路径`/hdfs`下的所有内容。 5. **查看文件内容**：`hadoop dfs -cat /hdfs` 显示HDFS上`/hdfs`文件的内容。 6. **统计信息**：`hadoop dfsadmin -report` 输出HDFS的总体状态，包括数据节点信息、存储信息等。 7. **安全模式**：`hadoop dfsadmin -safemode enter` 进入安全模式，`hadoop dfsadmin -safemode leave` 退出安全模式。 在分布式数据库HBase中，HBaseShell是进行交互式操作的主要工具，下面是一些常见的HBase命令： 1. **启动Shell**：`hbase shell` 打开HBase的命令行界面。 2. **获取帮助**：`help` 在Shell中显示所有可用命令。 3. **查看状态**：`status` 查看HBase集群的状态，包括活动服务器数量、故障服务器数量和平均负载。 4. **版本信息**：`version` 显示HBase的当前版本。 5. **创建表**：`create '表名', '列名1', '列名2'` 创建一个新的表，并指定列族。 6. **列出表**：`list` 列出所有已存在的表。 7. **描述表**：`describe '表名'` 显示表的详细信息，如列族、属性等。 8. **修改表**：`alter '表名', {NAME=’列名’,METHOD=’delete’}` 删除列族，但需先离线表：`disable '表名'`。 9. **删除表**：`drop '表名'` 删除表，同样需先离线：`disable '表名'`。 10. **检查表存在**：`exists '表名'` 判断表是否存在。 11. **表状态**：`is_enabled '表名'` 或 `is_disabled '表名'` 检查表是否启用或禁用。 12. **插入数据**：`put '表名', '行健', '列族:列名', '列值'` 向表中插入一行数据。 13. **获取数据**：`get '表名', '行健名'` 获取特定行的所有列族数据。 14. **获取特定列族数据**：`get '表名', '行健', '列族'` 获取特定行和列族的所有列数据。 15. **获取特定列数据**：`get '表名', '行键', '列族:列名'` 获取特定行、列族和列的数据。 16. **更新数据**：`put '表名', '行健', '列族:列名', '新列值'` 更新已存在的记录。 17. **按时间戳获取数据**：可以使用时间戳参数来获取特定时间点的数据。 18. **全表扫描**：`scan '表名'` 扫描整个表，获取所有数据。 19. **删除字段**：`delete '表名', '行键', '列族:列名'` 删除指定行键和列的数据。 这些命令是HDFS和HBaseShell的基础操作，对管理和操作Hadoop环境中的数据至关重要。理解并熟练掌握这些命令，可以有效提高数据处理的效率。