文件名称:Edmunds-Crawler:Edmunds.com 的爬虫
文件大小:1018KB
文件格式:ZIP
更新时间:2024-07-14 21:36:03
Java
Edmunds-Crawler : Edmunds.com 的爬虫 Edmunds 是领先的汽车客户评论和意见网站。 此爬虫提取某些选定车型的客户评论。 语言:Java 库:JSoup 笔记: 将 URL 文件保存在 urls 文件夹中:由于不同的汽车型号可能有多个需要抓取的 url。 ..* Nissan Altima 和 Honda_Civic 的示例 URL 文件可用 创建评论文件夹:这是将存储抓取的评论的位置。 FileName 将与 urls 文件夹中给出的相同。 ..* Sample Review 文件将在此文件夹中可用。 在运行 EdmundsCrawler 时,如果出现代理身份验证问题。 在 EdmundsCrawler.java 的 main 方法中插入代理
【文件预览】:
Edmunds-Crawler-master
----README.md(767B)
----urls()
--------NissanAltima(2KB)
--------Honda_Civic(841B)
----Reviews()
--------NissanAltima.txt(3KB)
--------HondaCivic.txt(73KB)
----mysql-connector-java-5.1.18-bin.jar(771KB)
----jsoup-1.6.3.jar(270KB)
----EdmundsCrawler.java(3KB)
----Review.java(555B)
----MySQLAccess.java(3KB)