scrapy之管道

时间:2022-01-24 03:31:06

scrapy之管道

  通过管道将数据持久化到数据库中,企业中常见的数据库是MySQL,分布式爬取数据时只能讲数据存储到Redis装,还可以将数据存储到本地磁盘(即写入到本地文件中)。

未完待续。。。

0