1、 安装
https://www.python.org/downloads/windows/ 到官网下载安装程序
Windows x86 32位操作系统
Windows x86-64 64位操作系统
web-based installer 基于网络的安装程序
executable installer 可执行的安装程序
embeddable zip file python的压缩包
上面3个任意下载一个就行了,都是一样的东西。我是下载第2个
help file 帮助文档
安装时记得勾上 ADD…to path。
安装成功后在命令提示符中输入 PYTHON,如图显示版本号就是安装成功,不是可执行命令的话,在系统变量path 中加上PYTHON的安装路径
PYTHON比较重要的几个环境变量(不是必须,根据需要配置):
PYTHONPATH |
PYTHONPATH是Python搜索路径,默认我们import的模块都会从PYTHONPATH里面寻找。 |
PYTHONSTARTUP
|
Python启动后,先寻找PYTHONSTARTUP环境变量,然后执行此变量指定的文件中的代码。 |
PYTHONCASEOK |
加入PYTHONCASEOK的环境变量, 就会使python导入模块的时候不区分大小写. |
PYTHONHOME |
另一种模块搜索路径。它通常内嵌于的PYTHONSTARTUP或PYTHONPATH目录中,使得两个模块库更容易切换。 |
2、 爬虫环境配置
说明:Pip模块会自动安装,可以在命令提示符窗口输入PIP测试是否安装成功。(直接执行PIP报错的话,可以CD 到PYTHON安装目录的Scripts文件夹下执行,或者直接执行 python -m pip)
确定pip安装好后,执行以下命令
1、pip install beautifulsoup4
2、到https://pypi.python.org/pypi/lxml/4.1.1 下载lxml库,记得下载适合自己操作系统和PYTHON版本的,比如我就是下载Windows64位+PYTHON3.6的
3、然后执行这个命令 pip install lxml的文件名及路径(例如:d:\xx.whl)
4、安装成功会提示 Successfully installed
3、 将脚本打包为EXE文件
(一)环境配置
1、 执行pip install pypiwin32
2、 执行 pip install pyinstaller
第二步如果安装不成功可以到http://www.pyinstaller.org/downloads.html下载安装包,然后执行
Python 解压后文件路径\setup.py install
(二)将源文件打包为EXE文件
pyinstaller -F -w 文件名及路径,成功后会提示存放位置。
-F:打包为单独的Exe文件 -w:不显示命令窗口
4、简单的爬虫程序和一个简单的GUI界面
import urllib
import re
from urllib import request
import tkinter as tk def getHtml(url):
page = urllib.request.urlopen(url)
html = page.read()
return html def getImg(html):
imgre = re.compile(r'src="(.+?\.jpg)"')
html = html.decode('utf-8') # python3
imglist = re.findall(imgre,html)
x = 0
for imgurl in imglist:
urllib.request.urlretrieve(imgurl,'%s.jpg' % x)
x+=1
def start(url):
html = getHtml(url)
print(getImg(html)) x = tk.Tk()
label1 = tk.Label(x,text = "请输入网址:")
label1.grid(row=0,column=0)
label2 = tk.Label(x,text = "请输入文件存放路径:")
label2.grid(row=1,column=0)
var1 = tk.StringVar()
entry1 = tk.Entry(x,textvariable=var1)
entry1.grid(row=0,column=1)
entry2 = tk.Entry(x)
entry2.grid(row=1,column = 1)
def seturl():
url="https://tieba.baidu.com/p/5475267611"
# 本来想动态获取文本框输入的,不知道为什么WINDOWS10上运行返回值是NONE,
# 另一台电脑WIN7却又可以,不知道是不是环境配置问题
# print(var1.get())
start(url)
cbbtn1 = tk.Checkbutton(x,text = "同意协议")
cbbtn1.grid(row = 2, column = 0) btn1 = tk.Button(x,text = "开始抓取",command = seturl)
btn1.grid(row = 2,column = 2)
btn2 = tk.Button(x,text = "取消")
btn2.grid(row = 2,column = 3) #img = tk.PhotoImage(file = "C:\Users\123456\Pictures\lovewallpaper\11.jpg")
#imgview = tk.Label(x,image = img)
#imgview.grid(row = 0,column = 2)
x.mainloop()