【文件属性】:
文件名称:alibaba
文件大小:8KB
文件格式:ZIP
更新时间:2021-04-01 05:11:12
Python
使用Scrapy搜寻Alibaba.com的搜索结果
抓狂的蜘蛛从alibaba.com的任何搜索结果页面中提取以下字段。 例如
领域
刮板将提取以下字段
产品名称
价格范围(美元)
最低订购量
卖方名称
卖家回应率
作为阿里巴巴卖家的年限-交易级别
要求
的Python 3
cra草
运行刮板机
将搜索关键字添加到
运行命令scrapy crawl alibaba_crawler -o out.csv -t csv将CSV数据获取到名为out.csv的文件中,或运行scrapy crawl alibaba_crawler -o out.json -t json将数据获取为JSON File。
样本输出
产品名称
产品价格
minimum_order
Seller_years_on_alibaba
Seller_name
Seller_response_rate
transa
【文件预览】:
alibaba-master
----scrapy.cfg(271B)
----scrapy_alibaba()
--------settings.py(3KB)
--------pipelines.py(294B)
--------middlewares.py(4KB)
--------items.py(293B)
--------spiders()
--------resources()
----README.md(4KB)