在ubutun上用mapreduce实现导入文件的。wordcount实例

在Ubuntu上使用MapReduce实现WordCount（单词计数）是一个常见的Hadoop入门示例。以下是简单的步骤：

1. 安装Hadoop：首先确保你已经安装了Apache Hadoop，包括HDFS（分布式文件系统）和MapReduce框架。可以在终端中运行命令安装Hadoop，例如`sudo apt-get install hadoop*`。

2. 配置环境变量：将Hadoop的bin目录添加到系统的PATH中，以便于命令行操作。编辑`.bashrc`或`.bash_profile`，增加以下内容：

   export HADOOP_HOME=/path/to/hadoop
   export PATH=$HADOOP_HOME/bin:$PATH

3. 创建Mapper和Reducer：WordCount需要两个主要的Java程序：
- Mapper：读取输入文件的一个分片，解析每一行，对每个词进行映射操作，输出键值对（词,1）。
- Reducer：接收Mapper的输出，对相同的键进行归约操作，累加对应的值。

4. 编写WordCount主程序：这个程序通常包含main函数，用于初始化JobConf对象，设置Mapper和Reducer类，并调用`job.waitForCompletion(true)`来启动作业。

5. 输入数据准备：创建一个文本文件作为输入数据，如`input.txt`，并将其放在Hadoop的默认输入路径`/user/hadoop/input`下。

6. 运行WordCount：从Hadoop shell（hadoop.cmd或hdfs dfs）中，使用`jar`命令提交应用程序，比如：

   hadoop jar your-wordcount-jar-file.jar wordcount /user/hadoop/input /user/hadoop/output

其中`your-wordcount-jar-file.jar`是打包好的MapReduce应用JAR包。

7. 查看结果：WordCount完成后，结果会保存在指定的输出路径`/user/hadoop/output`下的文本文件中，通常是词及其对应的频率。