hadoop使用api下载文件

Hadoop提供了多个API来下载文件，其中最常用的是FileSystem API和HDFS命令行API。

使用FileSystem API下载文件：

1. 创建一个FileSystem对象（通常是HDFS）：

Configuration conf = new Configuration();
FileSystem fs = FileSystem.get(conf);

2. 使用FileSystem对象打开一个输入流：

Path path = new Path("/path/to/file");
FSDataInputStream in = fs.open(path);

3. 从输入流中读取数据并写入到本地文件：

OutputStream out = new FileOutputStream("/local/path/to/file");
IOUtils.copyBytes(in, out, conf);

4. 关闭输入流和输出流：

IOUtils.closeStream(in);
IOUtils.closeStream(out);

使用HDFS命令行API下载文件：

1. 使用hadoop fs -get命令下载文件：

hadoop fs -get /path/to/file /local/path/to/file

2. 使用hadoop fs -copyToLocal命令下载文件：

hadoop fs -copyToLocal /path/to/file /local/path/to/file

以上两种方法都可以将HDFS上的文件下载到本地文件系统。