Python-由Python编写的全异步实现的动漫之家dmzj漫画批量下载器爬虫

时间:2022-08-31 23:20:59
【文件属性】:

文件名称:Python-由Python编写的全异步实现的动漫之家dmzj漫画批量下载器爬虫

文件大小:29KB

文件格式:ZIP

更新时间:2022-08-31 23:20:59

Python开发-Web爬虫

这是一个使用Python3编写的动漫之家的漫画批量下载器。相比于我之前所写过的几个爬虫,这个爬虫也是我第一次尝试全异步实现的一个爬虫例子,使用了aiohttp和aiofile这两个异步实现库来做支撑,相对于单线程爬虫和多线程爬虫


【文件预览】:
dev-techmoe-python-dcdownloader-76379f4
----.travis.yml(1KB)
----docs()
--------.gitkeep(0B)
----test()
--------test_utils.py(470B)
--------test_scheduler.py(1KB)
--------bootstrap.py(69B)
--------__init__.py(0B)
--------testserver()
----_config.yml(26B)
----LICENSE(1KB)
----requirements.txt(317B)
----dcdownloader()
--------main.py(601B)
--------parser_selector.py(311B)
--------utils.py(3KB)
--------base_logger.py(455B)
--------title.py(602B)
--------arg_parse.py(826B)
--------__init__.py(0B)
--------scheduler.py(11KB)
--------config.py(969B)
--------version.py(733B)
--------parser()
--------aiohttp_proxy_connector.py(896B)
----setup.py(555B)
----.gitignore(1KB)
----devscript()
--------build_pyinstaller_windows.sh(722B)
--------run_test.sh(123B)
--------build.sh(686B)
----README.md(3KB)

网友评论