spider_news_finance:SinaFinance、FTChinese、CFI 的 Scrapy Spider

时间:2024-08-01 20:03:44
【文件属性】:

文件名称:spider_news_finance:SinaFinance、FTChinese、CFI 的 Scrapy Spider

文件大小:22KB

文件格式:ZIP

更新时间:2024-08-01 20:03:44

Python

##README 当前的settings.py经过调试相对比较稳定,不要轻易修改!!! FTChinese由于网站本身不太稳定,当Parse News ERROR比较多时,可以开VPN,效果比较好 当前,所有爬虫增量抓取的开关已经打开,如果需要,可以手动关闭,/spiders/NewsFinance***.py文件的FLAG_INTERRUPT = True常量 如果有问题,可以QQ留言或者发邮件沟通hailong0707@gmail.com


【文件预览】:
spider_news_finance-master
----scrapy.cfg(280B)
----spider_news_finance()
--------items.pyc(667B)
--------pipelines.pyc(2KB)
--------pipelines.py(2KB)
--------spiders()
--------__init__.pyc(180B)
--------items.py(510B)
--------__init__.py(0B)
--------settings.py(846B)
--------settings.pyc(630B)
----db.sql(845B)
----README.md(483B)

网友评论