Python之路(第十五篇)sys模块、json模块、pickle模块、shelve模块

时间:2022-01-10 04:08:32

一、sys模块

1、sys.argv

命令行参数List,第一个元素是程序本身路径

Python之路(第十五篇)sys模块、json模块、pickle模块、shelve模块

Python之路(第十五篇)sys模块、json模块、pickle模块、shelve模块

Python之路(第十五篇)sys模块、json模块、pickle模块、shelve模块

Python之路(第十五篇)sys模块、json模块、pickle模块、shelve模块

2、sys.exit(n)

退出程序,正常退出时exit(0)

3、sys.version 、 sys.maxint

sys.version 获取Python解释程序的版本信息

sys.maxint 最大的Int值

Python之路(第十五篇)sys模块、json模块、pickle模块、shelve模块

Python之路(第十五篇)sys模块、json模块、pickle模块、shelve模块

4、sys.path

返回模块的搜索路径,初始化时使用PYTHONPATH环境变量的值

Python之路(第十五篇)sys模块、json模块、pickle模块、shelve模块

Python之路(第十五篇)sys模块、json模块、pickle模块、shelve模块

分析:sys.path输出的第一个结果是程序执行文件所在的文件夹绝对路径,这里的输出结果第二个是工程文件目录,但是这个目录是pycharm自主加上的,直接用解释器执行是没有这个路径的。

5、sys.platform

返回操作系统平台名称

Python之路(第十五篇)sys模块、json模块、pickle模块、shelve模块

Python之路(第十五篇)sys模块、json模块、pickle模块、shelve模块

6、sys.stdout.write() 、sys.stdout.flush()

sys.stdout.write() 标准输出 , sys.stdout.write 在交互器模式下这个函数输出数据到stdout,同时还有一个返回值,就是字符串的长度。在pycharm里输出不会有字符串的长度。

sys.stdout.flush() 刷新输出

Python之路(第十五篇)sys模块、json模块、pickle模块、shelve模块

在Linux系统下,必须加入sys.stdout.flush()才能一秒输一个字符(交互器模式下)

在Windows系统下,加不加sys.stdout.flush()都能一秒输出一个字符(交互器模式下)

在pycharm里都必须加sys.stdout.flush()才能刷新输出

Python之路(第十五篇)sys模块、json模块、pickle模块、shelve模块

例子

需求:做一个简单的进度条

Python之路(第十五篇)sys模块、json模块、pickle模块、shelve模块

Python之路(第十五篇)sys模块、json模块、pickle模块、shelve模块

7、 sys.stdin.readline() 、sys.getrecursionlimit() 、sys.setrecursionlimit(1200)

sys.stdin.readline()[:-1] 标准输入

sys.getrecursionlimit() 获取最大递归层数

sys.setrecursionlimit(1200) 设置最大递归层数

Python之路(第十五篇)sys模块、json模块、pickle模块、shelve模块

Python之路(第十五篇)sys模块、json模块、pickle模块、shelve模块

8、sys.getdefaultencoding() 、sys.getfilesystemencoding

sys.getdefaultencoding() 获取解释器默认编码

sys.getfilesystemencoding 获取内存数据存到文件里的默认编码

二、json模块、pickle模块

JSON(JavaScript Object Notation) 是一种轻量级的数据交换格式,Python的Json模块有序列化与反序列化两个过程。即 encodingdecoding。

  • encoding:把一个python对象编码转换成Json字符串。

  • decoding:把json格式字符串编码转换成python对象。

什么是序列化、反序列化?

我们把对象(变量)从内存中变成可存储或传输的过程称之为序列化,在Python中叫pickling,在其他语言中也被称之为serialization,marshalling,flattening等等,都是一个意思。

即把python中的对象变成可存储的json字符串。序列化之后,就可以把序列化后的内容写入磁盘,或者通过网络传输到别的机器上。

反过来,把变量内容从序列化的对象重新读到内存里称之为反序列化,即unpickling。

Json模块提供了四个功能:dumps、dump、loads、load

pickle模块提供了四个功能:dumps、dump、loads、load

JSON和Python内置的数据类型对应关系

JSON表示的对象就是标准的JavaScript语言的对象,JSON和Python内置的数据类型对应如下:

Python之路(第十五篇)sys模块、json模块、pickle模块、shelve模块

Python之路(第十五篇)sys模块、json模块、pickle模块、shelve模块

json和python之间相互转换

Python之路(第十五篇)sys模块、json模块、pickle模块、shelve模块

Python之路(第十五篇)sys模块、json模块、pickle模块、shelve模块

json的4个方法

json提供四个功能:dumps, dump, loads, load

1、dumps和dump

序列化过程

将一个python对象编码转换成Json字符串,可以存储可以网络远程传输

dumps只完成了序列化为str,将数据通过特殊的形式转换为所有程序语言都认识的字符串

dump必须传文件描述符,将序列化的str保存到文件中,将数据通过特殊的形式转换为所有程序语言都认识的字符串,并写入文件

dumps()用法

例子

  import json
dic = {"k1":"v1"}
str1= "nicholas"
data1 = json.dumps(dic)
data2 = json.dumps(str1)
print(data1)
print(data2)
print(type(data1))
print(type(data2))

  

输出结果

Python之路(第十五篇)sys模块、json模块、pickle模块、shelve模块

Python之路(第十五篇)sys模块、json模块、pickle模块、shelve模块

dump

例子

  
  import json
dic = {"k1":"v1"}
with open("test.json","a+") as f :
json.dump(dic,f)#传入要序列化的数据、文件描述符

  

输出结果

Python之路(第十五篇)sys模块、json模块、pickle模块、shelve模块

Python之路(第十五篇)sys模块、json模块、pickle模块、shelve模块

分析:数据通过json.dump转换为所有程序语言都认识的字符串,并写入文件

dump等价于dumps加上打开文件然后将data = json.dumps(var) 写入文件。

例子

  
  import json
dic = {"k1":"v1"}
data = json.dumps(dic)
with open("test.json","a+") as f :
f.write(data)

  

2、loads 和 load

​ loads 只完成了反序列化,将json编码的字符串再转换为python的数据结构

​ load 只接收文件描述符,完成了读取文件和反序列化,数据文件中读取数据,并将json编码的字符串转换为python的数据结构

用loads例子

  
  import json
with open("test.json") as f :
data = json.loads(f.read()) #需要加入f.read()方法读取文件数据
print(data)
print(type(data))

  

输出结果

  {'k1': 'v1'}
<class 'dict'>

  

用load例子2

  
  import json
with open("test.json") as f :
data = json.load(f) #直接加入文件描述符即可
print(data)
print(type(data))

  

输出结果

  
  {'k1': 'v1'}
<class 'dict'>

  

pickle和python之间相互转换

Python之路(第十五篇)sys模块、json模块、pickle模块、shelve模块

Pickle的问题和所有其他编程语言特有的序列化问题一样,就是它只能用于Python,并且可能不同版本的Python彼此都不兼容,因此,只能用Pickle保存那些不重要的数据,不能成功地反序列化也没关系。

Python之路(第十五篇)sys模块、json模块、pickle模块、shelve模块

picle模块 和json模块都有 dumps、dump、loads、load四种方法,而且用法一样。

不用的是json模块序列化出来的是通用格式,其它编程语言都认识,就是普通的字符串,

而picle模块序列化出来的只有python可以认识,其他编程语言不认识的,表现为乱码

注意json的序列化之后产生的格式是还是字符串,pickle序列化之后产生的格式是字节流,可以直接用于网络传输。

Python之路(第十五篇)sys模块、json模块、pickle模块、shelve模块

例子1

  
  import pickle
dic = {"k1":"v1"}
with open("test.pickle","wb") as f: #注意这里要用二进制模式,序列化后的对象是'bytes'
data = pickle.dumps(dic)
f.write(data)

  

或者

  
  import pickle
dic = {"k1":"v1"}
with open("test.pickle","wb") as f:
data = pickle.dump(dic,f)

  

例子2

  
  import pickle
with open("test.pickle","rb") as f:
data = pickle.loads(f.read())
print(data)

  

或者

  import pickle
with open("test.pickle","rb") as f:
data = pickle.load(f)
print(data)

  

json vs pickle比较:

JSON:

优点:跨语言、体积小

缺点:只能支持int\str\list\tuple\dict

Pickle:

优点:专为python设计,支持python所有的数据类型

缺点:只能在python中使用,存储数据占空间大

三、shelve 模块

shelve是封装了pickle,shelve 只能在python中用

shelve模块比pickle模块简单,只有一个open函数,返回类似字典的对象,可读可写;key必须为字符串,而值可以是python所支持的数据类型

序列化:保存对象至shelve文件中

例子

  
  import shelve
f = shelve.open("test")
names = ["nicholas","jack","pony"] #python中的数据
info = {"age":[18,54,48],"some":[1,2,3]} #python中的数据
f["names"] = ["nicholas","jack","pony"] #向文件中添加内容,添加方式与给字典添加键值对类似
f["info"] = {"age":[18,54,48],"some":[1,2,3]} #向文件中添加内容,添加方式与给字典添加键值对类似
f.close() #关闭文件

  

输出结果

Python之路(第十五篇)sys模块、json模块、pickle模块、shelve模块

Python之路(第十五篇)sys模块、json模块、pickle模块、shelve模块

分析:shelve序列化后产生3个文件

反序列化:从文件中读取对象

例子

  import shelve
d = shelve.open("test")
names = d["names"] # 从文件中类似字典中获取键值的方式一样读取内容
info = d["info"]
print(names,type(names))
print(info,type(info))
d.close() #关闭文件

  

输出结果

Python之路(第十五篇)sys模块、json模块、pickle模块、shelve模块

Python之路(第十五篇)sys模块、json模块、pickle模块、shelve模块