文件名称：Python-Webscraping:一组用于从网站上抓取数据的 Python 脚本。 这些脚本使用 Selenium、Scrapy、Requests 和 JSON 库
文件大小：26KB
文件格式：ZIP
更新时间：2024-07-09 20:38:09
Python
Python-网页抓取 由 Noah Christiano 于 2014 年 8 月 15 日创建。 Python Webscraping 是我用 Python 编写的一组脚本，用于从网站上抓取数据。 Rap Genius 使用 Selenium 和 Scrapy 从 Rap Genius 验证的艺术家页面中查找贡献最多的艺术家。 这个项目是我熟悉 Scrapy 和 Selenium（以及 Python）的方式。 Lowes 使用 Selenium 将搜索结果页面抓取到数据库中。 它试图利用多处理。 该项目利用了 Scrapy、Selenium、Requests、JSON、Multiprocessing 和 Sqlite3 库。 这个项目是我深入研究网络抓取的主要原因。 Kimsufi 抓取 JSON 数据以确定当前可供租用的服务器的可用性，然后发送状态电子邮件。 它利用 JSON
【文件预览】：
Python-Webscraping-master
----Rap Genius()
--------genius()
----Lowes()
--------lowes_automator.py(5KB)
--------listing.py(299B)
--------test.py(504B)
--------json()
--------locations()
--------store_numbers.txt(9KB)
--------README(3KB)
--------database_builder.py(820B)
--------multithreading.py(1KB)
----Kimsufi()
--------kimsufi_status.py(3KB)
--------README(686B)
----.gitignore(13B)
----README.md(986B)