文件名称:JAVA爬虫批量下载网页文件
文件大小:13KB
文件格式:ZIP
更新时间:2020-08-27 09:02:21
网页爬虫
该爬虫代码可将一个多页面含有多条文件的下载地址截取到,然后将下载地址放到linux系统里在控制台输入一条命令就可以进行批量下载(还可以直接调用浏览器的接口直接下载,这个可以自行修改),代码有注释具体目的解压后有个txt文件有简单介绍。代码不是完全原创的,也是自己根据需要进行整合。
【文件预览】:
spider
----src()
--------spider()
----bin()
--------spider()
----.classpath(301B)
----websave.txt(16KB)
----.settings()
--------org.eclipse.jdt.core.prefs(598B)
----介绍.txt(403B)
----.project(382B)