hadoop的api文件上传下载

Hadoop API 提供了一套用于文件上传和下载的接口，主要通过Hadoop Distributed File System (HDFS) API 来实现，这是Hadoop生态系统中分布式存储的核心组件。以下是使用Hadoop API进行文件操作的一些关键步骤：

1. **上传文件（put()方法）**:
- 使用`FileSystem`类的实例，通常从`Configuration`对象创建。
- 调用`FileSystem`对象的`put()`方法，指定要上传的本地文件路径以及在HDFS中的目标路径。

FileSystem fs = FileSystem.get(conf);
FSDataOutputStream outputStream = fs.create(new Path("/hdfs/path/to/your/file.txt"));
FileInputStream inputStream = new FileInputStream("local/path/to/local/file.txt");
IOUtils.copy(inputStream, outputStream);
outputStream.close();

2. **下载文件（get()方法）**:
- 使用`FSDataInputStream`从HDFS读取数据，然后写入到本地文件。
- 要下载整个目录的内容，可以使用`FileStatus`遍历目录并逐个获取文件。

FSDataInputStream inputStream = fs.open(new Path("/hdfs/path/to/your/file.txt"));
FileOutputStream outputStream = new FileOutputStream("local/download/path/file.txt");
IOUtils.copy(inputStream, outputStream);
inputStream.close();
outputStream.close();