1.序列化
定义:
JSON(JavaScript Object Notation) 是一种轻量级的数据交换格式。简单地说，JSON 可以将 JavaScript 对象中表示的一组数据转换为字符串，然后就
可以在函数之间轻松地传递这个字符串，或者在异步应用程序中将字符串从 Web 客户机传递给服务器端程序。这个字符串看起来有点儿古怪，但是JavaScript很容易
解释它，而且 JSON 可以表示比"名称 / 值对"更复杂的结构。
特点:
json:JavaScript 对象表示法（JavaScript Object Notation）。
json:是存储和交换文本信息的语法。类似 XML。
json:比 XML 更小、更快，更易解析。
json是通用语言，没有环境区分 python中的json
1.导入模块：import json
2.将字典对象转成字符串
dic = {'':2}
s = json.dumps(dic)
print(repr(s),typr(s)) 3.将字典转成字符串
str1 = "{\"1\"：2}"
s = json.loads(str1)
print(s,type(s) 4.将字典转成字符串写入文件
json.dump({'':4},open('a'),'w',encoding='utf-8') 5.将文件中的字符串转成字典
json.load(open('a','r',encoding='utf-8')) 拓展：快速转化json字符串为json对象(linux系统中)
$ echo '{"links":[{"name":"Google","url":"http://www.google.com"},{"name":"Baidu","url":"http://www.baidu.com"}]}' | python -m json.tool
import json
data = {'username':['李华','二愣子'],'sex':'male','age':16}
json_dic2 = json.dumps(data,sort_keys=True,indent=2,separators=(',',':'),ensure_ascii=False)
print(json_dic2) #separators=(',',':') 将,转成:
#ensure_ascii=False 不使用ascii对中文编码
#sort_keys=True 按照字母的ascii的编码大小排序
#indent=2 空2个缩进
2.pickle
pickle是python内部独有的序列化方法，只是在python语言中有效，不通用，但是在python中的序列化速度，因为其读取二进制流 import pickle #导入模块
print(pickle.dumps({'':4})) #将对象转换成类似二进制的东西(字节)
print(pickle.loads(b'\x80\x03}q\x00X\x01\x00\x00\x001q\x01K\x04s.')) #将二进制(字节)转成字典
pickle.dump({'':4},open('b','wb')) #将字典转成字节写入文件
d = pickle.load(open('b','rb')) #将文件中的字节转换成字典
print(d)
总结:
loads json里的将字符串转换成字典 pickle 将字节转换成字典
dumps json里的将字典转换成字符串 pickle 将字典转换成字节
load json里的将文件中的字符串转换成字典 pickle 将文件中的字节转换成字典
dump json里的将字典转换字符串写入到文件中,pickle 将字典转换成字节写入到文件中
注意：在文件中的字符串类型的字典的键值必须是双引号{"":2}
3.shelve(文件+字典操作)
import shelve
f = shelve.open('c',writeback=True) #创建文件 # writeback = True 回写
f['name'] = 'tmac'
['age'] = 18
print(f['name'],f['age'])
f['name'] = ['kobe','admin']
print(f['name']) for i in f:
print(i) #获取到所有的键
print(i[item]) #获取所有的值
4.random
import random
print(random.random()) #获取到的0-1之间的小数？将小数的前两位怎么取值那？ 面试题，能体现出基础
print(random.randint(1,10)) #获取a-b之间的随机数(b包含a和b)
print(random.randrange(1,3)) #获取1-3之间的随机数，但是不包含3
print(random.randrange(1,21,2)) #获取1-21之间的随机奇数，但是不包含21
print(random.choice([1,2,3,4,5,6,7])) #从可迭代对象里面随机
print(random.choice("sdfwefw")) #从可迭代对象里面随机选(没有索引的就会报错，比如字典，集合等无序的可迭代对象)
print(random.choices("sdfwefw",k=2)) #从可迭代对象里面随机选则两个，但是有重复(没有索引的就会报错，比如字典，集合等无序的可迭代对象)
print(random.sample("sdfwefw",k=2)) #从可迭代对象里面选择两个不同的 #########简陋版验证码###########
import random
U=(chr(random.randrange(65,91))) #获取65-91之间的ascii码值 大写
l=(chr(random.randrange(97,123))) #获取97-123之间的ascii码值 小写
n= random.randrange(0,10) #获取两个数字
n2 =random.randrange(0,10)
print(U,l,n,n2,sep="")
5.os模块
python标准库中的os模块对操作系统的api进行了封装，并且使用同一个api接口来管理不同的操作系统的相同功能。
os模块包含与操作系统的系统环境，系统变量，系统文件，用户数据库以及权限进行交换的函数，主要用来和操作系统做交互
python标准库中的os模块对操作系统的api进行了封装，并且使用同一个api接口来管理不同的操作系统的相同功能。
os模块包含与操作系统的系统环境，系统变量，系统文件，用户数据库以及权限进行交换的函数
2.1 os模块
os模块中包含两个比较常用的函数
os.getcwd() #获取当前绝对路径
os.listdir() #列出当前目录下的文件和文件夹
2.2 os.path详解(用来对文件和文件路径进行管理)
拆分路径
os.path.split() #返回一个二元组，包含文件路径和文件名
os.path.dirname() #返回文件的路径
os.path.basename() #返回文件名
os.path.splitext() #返回一个去处扩展名部分和扩展名的二元组
import os
path = "/root/p0st/h/error.log"
print(os.path.split(path)) --->('/root/p0st/h', 'error.log')
print(os.path.dirname(path)) --->/root/p0st/h
print(os.path.basename(path)) --->error.log
print(os.path.splitext(path)) --->('/root/p0st/h/error', '.log')
构建路径
os.path.expanduser('~')#返回当前输入用户的家目录,必须得加~或~adm等指定用户
os.path.abspath() #返回文件或路径的绝对路径
os.path.path() #根据不同的操作系统，使用不同的路径分隔符拼接路径
import os
print(os.path.expanduser('~adm')) --->/var/adm
print(os.path.abspath('')) --->E:\oldboy\python 20\456
print(os.path.join(os.path.expanduser('~'),'','456.txt')) --->/var/adm/123/456.txt 判断一个路径是否为绝对路径
import os
os.path.isabs(os.path.join(os.path.expanduser('~adm'),'','456.txt')) --->True 查看当前文件名字需要使用__file__这个特殊变量：当前代码所在的源文件
import os
path = os.path.abspath(__file__)
print(path) --->/var/adm/123/456.py
print(os.path.abspath(os.path.join(os.path.dirname(path),os.path.pardir))) -->/var
获取文件属性和判断文件类型
import os
path= os.path.abspath(__file__)
print(os.path.getatime(path)) #获取当前文件的访问时间
print(os.path.getctime(path)) #获取当前文件的创建时间
print(os.path.getmtime(path)) #获取当前文件的修改时间
print(os.path.getsize(path)) #获取当前文件的大小
print(os.path.exists(path)) #判断当前路径是否存在
print(os.path.isfile(path)) #参数所指的路径存在，并且是一个文件
print(os.path.isdir(path)) #参数所所指的路径存在，并且是一个目录
print(os.path.islink(path)) #。。。。。。。并且是一个链接
print(os.path.ismount(path)) #。。。。。。。并且是一个挂载点 使用os模块管理文件和目录
os.remove(path)/unlink(path): 删除path所指的文件
os.rmdir(path)/removedirs(path) : 删除path所指向的目录，该文件夹必须为空，否则报错。
os.mkdir(path):创建一个文件夹
os.rename('olddir','newdir'):修改一个文件夹的名字
使用os模块来修改和判断文件权限
os.chmod(filename,0777) #修改文件权限
os.access(filename,os.R_OK)#判断文件权限---> os.R_OK：是否可读， os.W_OK:是否可写, os.X_OK：是否可执行
os模块常用的
#和文件夹相关
os.makedirs('dirname1/dirname2') 可生成多层递归目录
os.removedirs('dirname1') 若目录为空，则删除，并递归到上一级目录，如若也为空，则删除，依此类推
os.mkdir('dirname') 生成单级目录；相当于shell中mkdir dirname
os.rmdir('dirname') 删除单级空目录，若目录不为空则无法删除，报错；相当于shell中rmdir dirname
os.listdir('dirname') 列出指定目录下的所有文件和子目录，包括隐藏文件，并以列表方式打印
# 和文件相关
os.remove() 删除一个文件
os.rename("oldname","newname") 重命名文件/目录
os.stat('path/filename') 获取文件/目录信息
# 和操作系统差异相关
os.sep 输出操作系统特定的路径分隔符，win下为"\\",Linux下为"/"
os.linesep 输出当前平台使用的行终止符，win下为"\r\n",Linux下为"\n"
os.pathsep 输出用于分割文件路径的字符串 win下为;,Linux下为:
os.name 输出字符串指示当前使用平台。win->'nt'; Linux->'posix'
# 和执行系统命令相关
os.system("bash command") 运行shell命令，直接显示
os.popen("bash command).read() 运行shell命令，获取执行结果
os.environ 获取系统环境变量
#path系列，和路径相关
os.path.abspath(path) 返回path规范化的绝对路径
os.path.split(path) 将path分割成目录和文件名二元组返回
os.path.dirname(path) 返回path的目录。其实就是os.path.split(path)的第一个元素
os.path.basename(path) 返回path最后的文件名。如何path以／或\结尾，那么就会返回空值，即os.path.split(path)的第二个元素。
os.path.exists(path) 如果path存在，返回True；如果path不存在，返回False
os.path.isabs(path) 如果path是绝对路径，返回True
os.path.isfile(path) 如果path是一个存在的文件，返回True。否则返回False
os.path.isdir(path) 如果path是一个存在的目录，则返回True。否则返回False
os.path.join(path1[, path2[, ...]]) 将多个路径组合后返回，第一个绝对路径之前的参数将被忽略
os.path.getatime(path) 返回path所指向的文件或者目录的最后访问时间
os.path.getmtime(path) 返回path所指向的文件或者目录的最后修改时间
os.path.getsize(path) 返回path的大小<br></em> #其他应用
os.getcwd() 获取当前工作目录，即当前python脚本工作的目录路径
os.chdir("dirname") 改变当前脚本工作目录；相当于shell下cd
os.curdir 返回当前目录: ('.')
os.pardir 获取当前目录的父目录字符串名：('..')
注意：os.stat('path/filename') 获取文件/目录信息 的结构说明 stat 结构:
st_mode: inode 保护模式
st_ino: inode 节点号。
st_dev: inode 驻留的设备。
st_nlink: inode 的链接数。
st_uid: 所有者的用户ID。
st_gid: 所有者的组ID。
st_size: 普通文件以字节为单位的大小；包含等待某些特殊文件的数据。
st_atime: 上次访问的时间。
st_mtime: 最后一次修改的时间。
st_ctime: 由操作系统报告的"ctime"。在某些系统上（如Unix）是最新的元数据更改的时间，在其它系统上（如Windows）是创建时间（详细信息参见平台的文档）。
6.sys模块
sys模块提供对解释器使用或维护的一些变量的访问，以及与解释器强烈交互的函数。它始终可用
7sys
1.基本
print(sys.path) # 添加自定义模块路径和解释器的工作目录 # ******
print(sys.version) # 获取解释的版本号
print(sys.platform) #获取当前操作系统的平台位数
print(sys.exit(1)) #退出并返回1 2.sys.argv
sys.argv():
sys.argv：是sys库下面的列表，该列表保存了所有的命令行参数，其中下标为0的元素是执行文件的名字，其余的参数已字符串的形式保存在该列表中
此列表可以从终端接收无数个参数，而存放在列表当中，如果没有第一个参数的话，程序会报错，而无法执行，所以在argv中添加一个空元素，当python json.py test.txt有参数的时候，test.txt就成了argv的第一个元素 在Python标准库sys中有三个文件描述符分别是：
stdin(标准输入 0,指的是通过<或者|来传递数据)，
stdout(标准输出 1),
stderr(标准错误 2)。
通过标准输入结合管道，就不需要通过open()函数来打开文件了。 1.使用sys库中的stdin读取内容(linux中的标准输入)
windows
创建 tes_sys_stdin.py文件
import sys
name = sys.stdin.readline()
print (name)
linux:
创建 test_sys_stdin.py文件
import sys
for line in sys.stdin():
print (line)
执行test_sys_stdin.py文件：
cat /etc/passwd | python test_sys_stdin.py
python test_sys_stdin.py < /etc/passwd
也可以通过stdin.readlines()函数将标准输入的内容读取到一个列表里面
sys.stdin.readline( )会将标准输入全部获取，包括末尾的'\n'，因此用len计算长度时是把换行符'\n'算进去了的，但是input( )获取输入时返回的结果是不包含末尾的换行符'\n'的。
因此如果在平时使用sys.stdin.readline( )获取输入的话，不要忘了去掉末尾的换行符.
可以用strip( )函数（sys.stdin.readline( ).strip('\n')）或sys.stdin.readline( )[:-1]这两种方法去掉换行。
8.other
os sys 事列一
"""
通过命令行读取文件名称，如果文件存在，则查看是否能执行，不能的话修改权限为777，如果可执行的话就打印输出文件内容，如果文件不在，则提示文不存在
"""
# _*_ encoding:utf-8 _*_
import os
import sys sys.argv.append('')
file_name = sys.argv[1]
def read_file():
if not os.path.isfile(file_name):
raise SystemExit(file_name + " 文件不存在")
elif os.access(file_name,os.X_OK):
with open(file_name) as info:
print(info.read())
else:
os.chmod(file_name,0777)
print("已修改为0777")
if __name__ == '__main__':
read_file()
os sys 事列二
"""
打印最常用的十条linux命令
"""
#_*_ encoding:utf-8 _*_
import os
from collections import Counter c = Counter()
with open(os.path.expanduser('~/.bash_history')) as cmd_info:
for line in cmd_info:
cmd = line.strip().split()
if cmd:
c[cmd[0]]+=1
print(c.most_common(10))
9.hashlib
Python的hashlib提供了常见的摘要算法，如MD5，SHA1，SHA256，SHA512等等。
什么是摘要算法呢？摘要算法又称哈希算法、散列算法。它通过一个函数，把任意长度的数据转换为一个长度固定的数据串（通常用16进制的字符串表示）。 基本应用
import hashlib #导入hashlib模块
md5 = hashlib.md5() #选择一个要加密的方式
md5.update(''.encode('utf-8')) #将要加密的内容格使用选择后的方法进行加密
print(md5.hexdigest()) #返回加密后的字符串 import hashlib
md5 = hashlib.md5('盐'.encode('utf-8')) # 选择加密方式 加盐
md5.update('admin'.encode('utf-8')) #将明文转成字节然后进行加密
print(md5.hexdigest()) #生成密文 使用sha1等加密方式，只需要把上面MD5的名字换掉就ok