mapreduce实现单词的词频统计实验目的和要求
时间: 2023-11-25 21:05:50 浏览: 138
大数据小型项目源码之mapreduce英语单词频次统计
实验目的:
1. 理解 MapReduce 的思想和原理;
2. 掌握 Hadoop 框架下 MapReduce 的编程方法;
3. 学习使用 Java 语言编写 MapReduce 程序;
4. 学习使用 Hadoop Streaming 编写 MapReduce 程序。
实验要求:
1. 实现一个简单的单词词频统计程序;
2. 使用 Hadoop 框架下的 MapReduce 编程实现;
3. 使用 Java 语言编写 MapReduce 程序;
4. 使用 Hadoop Streaming 编写 MapReduce 程序;
5. 使用 HDFS 存储数据和结果;
6. 运行程序并检验结果的正确性。
阅读全文