新建mapreduce project,完成hdfs的java编程:从本地上传文件

在Hadoop MapReduce项目中，如果你想要从本地上传文件到HDFS (Hadoop Distributed File System)，首先需要做的是设置好Hadoop环境并配置好HDFS。以下是简单的步骤：

1. **配置Hadoop**: 确保你已经安装了Hadoop，并将其添加到系统路径中。你可以通过运行`hadoop version`命令检查版本。

2. **创建Mapper和Reducer**: 在MapReduce项目中，你需要编写Mapper和Reducer类。Mapper负责读取输入数据，Reducer处理Map阶段的结果。

3. **上传文件到HDFS**:
- 使用`FileSystem` API: Java Hadoop提供了一个`FileSystem`接口，你可以创建一个`FileSystem`实例并与HDFS连接。例如：

     Configuration conf = new Configuration();
     FileSystem fs = FileSystem.get(conf);
     Path outputPath = new Path("hdfs://your-cluster-name/path/to/upload");
     Path localFile = new Path("local-file-to-upload.txt");
     fs.copyFromLocalFile(localFile, outputPath);

- 这里"your-cluster-name"是你的集群名，"path/to/upload"是你在HDFS上指定的目录。

4. **提交Job**:
在准备好输入文件和配置任务之后，你可以通过`JobSubmissionClient`提交作业，启动MapReduce任务。

   Job job = Job.getInstance(conf, "YourJobName");
   job.setJarByClass(YourMainClass.class); // 替换为你项目的主类
   job.setInputFormatClass(TextInputFormat.class);
   job.setOutputKeyClass(Text.class);
   job.setOutputValueClass(IntWritable.class);
   FileInputFormat.addInputPath(job, localFile);
   FileOutputFormat.setOutputPath(job, outputPath);
   job.waitForCompletion(true);

记得替换上述代码中的相应变量，并根据实际需求调整Mapper、Reducer和配置项。