第2关：HDFS文件读写

HDFS（Hadoop Distributed File System）是Apache Hadoop项目的核心组件，它是一个分布式存储系统，用于大规模数据集的管理和处理。在第二关，涉及到HDFS文件的读写操作：

1. **写入文件**：
- 使用`write()`或`append()`方法将数据块写入到HDFS上。首先，需要创建一个`FSDataOutputStream`对象，通过`Path`指定文件路径，并设置合适的配置（如复制因子）。

   Configuration conf = new Configuration();
   FileSystem fs = FileSystem.get(conf);
   FSDataOutputStream out = fs.create(new Path("hdfs://<namenode>/path/to/file"), true);
   byte[] data = ...; // 要写入的数据
   out.write(data);
   out.close();

2. **读取文件**：
- 创建一个`FSDataInputStream`，然后从该流中逐字节读取数据。

   FSDataInputStream in = fs.open(new Path("hdfs://<namenode>/path/to/file"));
   byte[] buffer = new byte[1024];
   int bytesRead;
   while ((bytesRead = in.read(buffer)) != -1) {
       String readData = new String(buffer, 0, bytesRead);
       // 处理读取的数据
   }
   in.close();

3. **错误处理**：
HDFS可能会因为网络故障或其他原因导致I/O异常，因此在操作后通常会检查并处理可能出现的异常。