资源简介

Hadoop mapreduce 实现InvertedIndexer倒排索引,能用。

资源截图

代码片段和文件信息


import java.io.BufferedReader;
import java.io.FileReader;
import java.io.IOException;
import java.net.URI;
import java.util.List;
import java.util.Set;
import java.util.StringTokenizer;
import java.util.ArrayList;
import java.util.TreeSet;

import org.apache.hadoop.conf.Configuration;
import org.apache.hadoop.filecache.DistributedCache;
import org.apache.hadoop.fs.Path;
import org.apache.hadoop.io.IntWritable;
import org.apache.hadoop.io.Text;
import org.apache.hadoop.mapreduce.RecordReader;
import org.apache.hadoop.mapreduce.lib.input.LineRecordReader;
import org.apache.hadoop.mapreduce.InputSplit;
import org.apache.hadoop.mapreduce.lib.input.FileSplit;
import org.apache.hadoop.mapreduce.TaskAttemptContext;
import org.apache.hadoop.mapreduce.lib.partition.HashPartiti

 属性            大小     日期    时间   名称
----------- ---------  ---------- -----  ----
     目录           0  2014-09-18 19:08  CH 8.5 - InvertedIndexer\
     文件        6540  2014-09-18 19:09  CH 8.5 - InvertedIndexer\README.html
     文件         597  2014-09-18 18:56  CH 8.5 - InvertedIndexer\README.md
     目录           0  2014-07-31 21:01  CH 8.5 - InvertedIndexer\src\
     文件        8370  2014-07-24 10:47  CH 8.5 - InvertedIndexer\src\InvertedIndexer.java
     文件        2853  2014-07-24 10:48  CH 8.5 - InvertedIndexer\src\SimpleInvertedIndex.java

评论

共有 条评论