文件名称:垂直搜索引擎爬虫系统的设计 (2010年)
文件大小:1.23MB
文件格式:PDF
更新时间:2024-06-10 11:40:39
自然科学 论文
垂直搜索引擎爬虫系统的主要作用是根据用户的需求抽取目标字段值。针对垂直搜索引擎数据定向抽取的特点,爬虫系统首先将一张范例网页“清洗”成符合W3C标准的文档,然后利用可视化XPath生成器解析该页面,获取目标字段对应的XPath路径,利用XPath路径进行数据抽取,最终获得目标字段值。经检测,该系统具有较高的抽取效率,其稳定性和安全性都符合实际应用需求。