MapReduce倒排索引解决思路

MapReduce倒排索引解决思路如下：
1. Map过程的设计：对输入的value进行解析，得到文档中的所有单词。获得<key, value>所属的FileSplit对象，得到文档名信息将单词和文档名进行组合，作为输出的key;并把词频初始化为1，作为输出的value。（这里之所以将初始化为1的词频作为value,是为了下一步对词频进行加和）。
2. Reduce过程的设计：对于每个单词，Reduce函数接收到的是一个key和一组values。对values进行遍历，将所有的value相加，得到该单词在整个文档集合中的总词频。然后将该单词和包含该单词的文档列表作为输出的key，将总词频作为输出的value。
3. 倒排索引的生成：将Reduce的输出结果写入到HDFS中，生成倒排索引。