文件名称:crawler_python
文件大小:514KB
文件格式:ZIP
更新时间:2024-07-27 20:48:26
Python
此脚本用于网络信息获取#author jiajunzhang 环境:linux 3.11.6-4 python 2.7 对于程序使用:首先你应该安装一些 Python 包: pip install Beautiful pip install codecs pip install threading pip install Queue 然后你可以使用它,例如:./crawler_python.py ./try.py ./deep.py 程序会将结果存储到 *.txt 希望它能给你一些帮助
【文件预览】:
crawler_python-master
----crawler_python.py(4KB)
----deep_try.py(5KB)
----test.txt(505KB)
----author.py(146B)
----title.txt(8KB)
----try.py(4KB)
----finally.py(4KB)
----README.md(415B)
----url_result.txt(363KB)
----backup_module()
--------test.txt(541KB)
--------thread_queue.py(2KB)
--------thread_mutex.py(2KB)
--------mysql.py(1018B)
--------links_get.py(2KB)
--------url_result.txt(78KB)
--------crawler_python_1.py(4KB)
--------thread_store.py(4KB)
--------B()