texas-deathrow:德州Deathrow囚犯数据

时间:2024-06-14 07:09:03
【文件属性】:

文件名称:texas-deathrow:德州Deathrow囚犯数据

文件大小:7KB

文件格式:ZIP

更新时间:2024-06-14 07:09:03

Python

关于 我找到了 ,其中有遗言。 该还具有其他违法者信息(请参阅),例如身高,职业,事件信息,照片等。不过,有些是图像(请参见 。 该应用程序(目前)将和链接的最后一个语句重新deathrow.csv到deathrow.csv文件中。 不久,我们可能会在此添加视觉效果。 设置 安装 运行pip install aiohttp 运行python scrape.py 。 结果在deathrow.csv 。 性能说明 是美丽的。 您无需眨眼即可触发1,000个HTTP请求。 (我会毫不犹豫地触发1,000个进程或什至是线程。)当然,在此之前,我们的回报率一直在下降。 一次有2个请求,大约需要5.5分钟。 使用50,只需半分钟。 除此之外,加速可以忽略不计(可能是因为带宽,延迟不,成为制约因素。毕竟,我们正在下载5MB左右,而在它上面做了一些lxml的处理。) 2: 330s


【文件预览】:
texas-deathrow-master
----img()
--------requests-speed.png(3KB)
----.gitignore(1KB)
----README.md(2KB)
----scrape.py(4KB)

网友评论