文件名称：论文研究-移动新闻自适应采集方法研究.pdf
文件大小：784KB
文件格式：PDF
更新时间：2022-08-11 11:38:56
移动新闻应用,新闻爬虫,站点地图,自适应,增量更新
通过分析面向传统新闻门户网站和面向移动新闻应用的新闻采集方法的异同，提出了一种面向移动新闻应用的自适应新闻采集方法。该方法先通过代理对移动新闻应用与服务器通信的数据包进行解析，构造出移动新闻应用的站点地图；然后通过模拟用户行为自适应地增量采集新闻数据，提高更新效率并保证新闻采集的完整性。以国内外20多家主流的移动新闻应用为实验对象开展验证，实验结果表明该方法的有效性和实时性。