搜索结果: 1-2 共查到“工学 Nutch”相关记录2条 . 查询时间(0.062 秒)
通过对Nutch MapReduce job配置参数调优而优化Nutch爬行性能。以Hadoop视角梳理Nutch爬行过程,并基于此详细分析Nutch MapReduce job的工作流特性;对Nutch爬行时MapReduce job进行持续监测,生成优化参数并代入下一轮相同类型的job运行中,从而达到优化目的;通过选取合适的间隔监测值平衡集群环境误差和监测负载以改进优化效果。经过实验测试,Nu...
基于Nutch的XML网站全文搜索引擎实现
XML信息检索 可扩展样式表语言转换 基于Nutch的搜索引擎
2009/7/31
普通搜索引擎的网页抓取程序只能理解常见HTML标签，无法对XML网站的内容做有效解析。该文建立一个包含动态自定义标签的纯XML网站，提出借助XSL样式信息帮助网页抓取程序理解XML网页标签含义的方案，实现了基于Nutch的XML网站全文搜索引擎。