arXivDaily arXiv每日学术速递 周一至周五更新
arXiv周末暂无论文更新,休息一下吧,周末愉快~~
arXiv 1004.4489cs.IR
收藏

MIREX:MapReduce信息检索实验

MIREX: MapReduce Information Retrieval Experiments

Djoerd Hiemstra, Claudia Hauff

摘要:

我们建议使用MapReduce通过顺序扫描所有文档来快速测试机器集群上的新检索方法。我们提出了一个小的案例研究中,我们使用一个集群的15个低成本的机器,中国搜索的Web抓取的0.5亿页,顺序扫描是一个可行的方法来运行大规模的信息检索实验,很少的努力。其他研究人员可以在以下网址获得该代码:http://mirex.sourceforge.net

英文摘要:

We propose to use MapReduce to quickly test new retrieval approaches on a cluster of machines by sequentially scanning all documents. We present a small case study in which we use a cluster of 15 low cost ma- chines to search a web crawl of 0.5 billion pages showing that sequential scanning is a viable approach to running large-scale information retrieval experiments with little effort. The code is available to other researchers at: http://mirex.sourceforge.net

机构、总结、中文摘要均由AI分析而来,可能存在错误,请以论文正文为准。

↑