MIREX:MapReduce信息检索实验
MIREX: MapReduce Information Retrieval Experiments
摘要:
我们建议使用MapReduce通过顺序扫描所有文档来快速测试机器集群上的新检索方法。我们提出了一个小的案例研究中,我们使用一个集群的15个低成本的机器,中国搜索的Web抓取的0.5亿页,顺序扫描是一个可行的方法来运行大规模的信息检索实验,很少的努力。其他研究人员可以在以下网址获得该代码:http://mirex.sourceforge.net
英文摘要:
We propose to use MapReduce to quickly test new retrieval approaches on a cluster of machines by sequentially scanning all documents. We present a small case study in which we use a cluster of 15 low cost ma- chines to search a web crawl of 0.5 billion pages showing that sequential scanning is a viable approach to running large-scale information retrieval experiments with little effort. The code is available to other researchers at: http://mirex.sourceforge.net
机构、总结、中文摘要均由AI分析而来,可能存在错误,请以论文正文为准。