文件名称:Python爬虫-简单实用
文件大小:210KB
文件格式:ZIP
更新时间:2015-10-15 16:28:37
python,爬虫
将自己之前研究的一个爬虫程序共享,其中加入了爬取和解析的线程池,对研究爬虫的人会有帮助。
【文件预览】:
main.py
scans
----.svn()
--------tmp()
--------props()
--------all-wcprops(100B)
--------entries(207B)
--------prop-base()
--------text-base()
----1.txt(15KB)
smart
----HTTP.py(6KB)
----crawlerpersister.pyc(8KB)
----__init__.pyc(122B)
----.svn()
--------tmp()
--------props()
--------all-wcprops(1KB)
--------entries(1KB)
--------prop-base()
--------text-base()
----BeautifulSoup.py(77KB)
----__init__.py(0B)
----lswww.py(34KB)
----httplib2()
--------socks.pyc(15KB)
--------iri2uri.pyc(4KB)
--------__init__.pyc(41KB)
--------.svn()
--------__init__.py(48KB)
--------iri2uri.py(4KB)
--------LICENSE-socks(1KB)
--------socks.py(14KB)
--------README-socks(9KB)
--------README(4KB)
----libcookie.py(13KB)
----BeautifulSoup.pyc(67KB)
----crawlerpersister.py(7KB)
----getcookie.py(3KB)
----cookie.py(1KB)
----HTTP.pyc(9KB)
----libcookie.pyc(10KB)
----lswww.pyc(33KB)