文件名称:Scrapy-Test-Scraping:此项目使用Scrapy从模拟抓取网站抓取数据
文件大小:8KB
文件格式:ZIP
更新时间:2024-03-03 03:47:51
python scrapy webscraping Python
使用Scrapy进行网页抓取 这是一个Scrapy项目,用于从抓取模拟图书数据 要求: ( pip3 install scrapy ) 提取数据 该项目提取书名,价格,等级和网址。 提取的数据类似于以下示例: { 'title': 'A Light in the Attic', 'price': '£51.77', 'rating': 'Three', 'link': 'https://books.toscrape.com/catalogue/a-light-in-the-attic_1000/index.html' } 跑蜘蛛 您可以使用scrapy crawl命令运行Spider,例如: $ scrapy crawl bookspider 如果要将抓取的数据保存到文件中,则可以传递-o选项: $ scrapy crawl bookspider
【文件预览】:
Scrapy-Test-Scraping-main
----LICENSE(1KB)
----bookscraper()
--------scrapy.cfg(265B)
--------bookscraper()
----.gitignore(2KB)
----README.md(862B)
----.gitattributes(66B)