Python【第三篇】文件操作、字符编码

时间:2023-03-09 15:02:24
Python【第三篇】文件操作、字符编码

一、文件操作

文件操作分为三个步骤:文件打开、操作文件、关闭文件,但是,我们可以用with来管理文件操作,这样就不需要手动来关闭文件。

实现原理:

import contextlib
@contextlib.contextmanager
def show():
print('123')
yield
print('456') with show():
print('777')
print('888')
print('999')

操作步骤

#windows下默认为gbk,要指定编码为'utf-8'
#'r'为只读,'test.txt'为文件路径
f=open('test.txt','r',encoding='utf-8') #utf-8编码方式打开文件
data=f.read()               #操作文件
f.close()                 #关闭文件
print(data) # 用with语句打开,不需要手动关闭
with open('test.txt','r',encoding='utf-8') as f:
print(f.read())

示例 

# r,只读模式【默认,不存在则报错】
# w,只写模式【不可读:不存在则创建;存在则清空内容】
# x,只写模式【不可读:不存在则创建,存在则报错】
# a,追加模式【不可读;不存在则创建;存在则只追加内容】
# "+"表示可以同时读写某个文件,比如r+、w+、x+、a+
# "b"表示以字节的方式操作,rb或r+b,wb或w+b,xb或x+b,ab或a+b,
# 以b方式打开时,读取到的内容是字节类型,写入时也需要提供字节类型,这些都需要程序员来做转换。
# f.tell() 读取指针的位置
# f.seek() 设置指针的位置 # r只读(不存在则报错)
with open('test.txt', 'r', encoding='utf-8') as f:
print(f.read()) # test.txt,不存在,报错 # w只写(不可读,不存在创建,存在则清空)
with open('test.txt', 'w') as f:
f.write('123') # 创建test.txt 写入新内容123 # x只写(不可读,不存在创建,存在报错)
with open('test.txt', 'x') as f:
f.write('666') # 这里存在,报错 # a追加模式(不可读,不存在创建,存在往末尾追加)
with open('test.txt', 'a') as f:
f.write('111') # 往test.txt里面追加111 # 以字节方式打开,将test.txt里面的文件内容清空,往里面写入'大家好',需要将内容转换成bytes类型
with open('test.txt', 'wb') as f:
str_data = '大家好'
byte_data = str_data.encode('utf-8')
f.write(byte_data) # 以rb读
with open('test.txt', 'rb') as f:
data = f.read()
print(data) # b'\xe5\xa4\xa7\xe5\xae\xb6\xe5\xa5\xbd'
print(type(data)) # 打印出读取的类型<class 'bytes'>
str_data = data.decode('utf-8')
print(str_data) # 大家好 # r+形式 写的时候在末尾追加,指针移到到最后
with open('test.txt','r+',encoding='utf-8') as f:
print(f.tell()) # 打印下 文件开始时候指针指向哪里 这里指向 0
print(f.read()) # 读出文件内容'大家好'
print(f.tell()) # 文件指针指到 9,一个汉子三个字符串,指针是以字符为单位
f.write('我在学习') # 写入内容'我在学习',需要特别注意此时文件指针在末尾
print(f.read()) # 指针到末尾去了,所以读取的内容为空
print(f.tell()) # 指针指到15
f.seek(0) # 将指针内容指到 0 位置
print(f.read()) # 因为文件指针指到开头去了,所以可以读到内容 大家好我在学习 # w+形式 存在的话先清空 一写的时候指针到最后
with open('test.txt', 'w+') as f:
f.write('python') # test.txt存在,所以将内面的内容清空,然后再写入 'python'
print(f.tell()) # 此时指针指向6
print(f.read()) # 读不到内容,因为指针指向末尾了
f.seek(0) # 移动指针到开头
print(f.read()) # 读到内容 # a+打开的时候指针已经移到最后,写的时候不管怎样都往文件末尾追加
with open('test.txt', 'a+') as f:
print(f.tell())
f.write(' is best')
print(f.read()) # 读不到内容,因为指针指向末尾了
f.seek(0) # 移动指针到开头
print(f.read()) # 读到内容 # x+文件存在的话则报错
with open('test.txt', 'x+') as f: # FileExistsError: [Errno 17] File exists: 'test.txt'
print(f.tell())
f.write(' hello')
print(f.read())
f.seek(0)
print(f.read())  

同时操作多个文件

# 拷贝A文件到B文件中
with open('A.txt','r',encoding='utf-8') as fr,open('B.txt','w',encoding='utf-8') as fw:
for line in fr: # 一行行的读
fw.write(line) # 一行行的写

二、字符编码

在python中,编码是一个比较折腾的难点,特别是python2。

首先,了解下这几种编码:

  ASCII(American Standard Code for Information Interchange,美国标准信息交换代码)是基于拉丁字母的一套电脑编码系统,主要用于显示现代英语和其他西欧语言,其最多只能用 8 位来表示(一个字节),即:2**8 = 256,所以,ASCII码最多只能表示 256 个符号,显然ASCII码无法将世界上的各种文字和符号全部表示,所以,就需要新出一种可以代表所有字符和符号的编码,即:Unicode

  Unicode(统一码、万国码、单一码)是一种在计算机上使用的字符编码。Unicode 是为了解决传统的字符编码方案的局限而产生的,它为每种语言中的每个字符设定了统一并且唯一的二进制编码,规定虽有的字符和符号最少由 16 位来表示(2个字节),即:2 **16 = 65536,注:此处说的的是最少2个字节,可能更多

  UTF-8,是对Unicode编码的压缩和优化,他不再使用最少使用2个字节,而是将所有的字符和符号进行分类:ascii码中的内容用1个字节保存、欧洲的字符用2个字节保存,东亚的字符用3个字节保存...

在python3中,字符串编码是unicode,默认文件编码是utf-8(存在硬盘上的文件),所以可以省略文件头编码声明:#-*- coding:utf-8 -*-

读取到内存会被python解释器自动转换成unicode

而且,所有的unicode字符编码后都会变成bytes类型

Python【第三篇】文件操作、字符编码

但是如果是其他文件编码,如gbk,则需要声明文件编码:#-*- coding:gbk -*-,但是以gbk读取到内存中后,依然会转为unicode

总之,以什么编码方式存在硬盘上(代码字符串文件头定义的编码,比如:# -*- coding:utf8 -*-),就用什么编码方式从硬盘上读,不管什么编码方式,python3都会将字符串在内存中转为unicode

py3自动把文件编码转为unicode必定是调用了什么方法,这个方法就是,decode(解码) 和encode(编码)

UTF-8 --> decode 解码 --> Unicode

Unicode --> encode 编码 --> GBK / UTF-8

Python【第三篇】文件操作、字符编码

#-*- coding:utf-8 -*-
import sys
print(sys.getdefaultencoding()) # utf-8
s = '你好'
print(s) # 你好
print(type(s)) # <class 'str'>
print(s.encode()) # b'\xe4\xbd\xa0\xe5\xa5\xbd'
s_to_gbk = s.encode('gbk') # 编码成gbk
print(s_to_gbk) # b'\xc4\xe3\xba\xc3'
print(s_to_gbk.decode('gbk').encode('utf-8')) # gbk转成utf-8,和上面s.encode()一样,b'\xe4\xbd\xa0\xe5\xa5\xbd'

三、练习题(参考答案已放在Q群文件中)

1.实现简单的shell sed替换功能

2.注册

  注册信息存放在文件中

3.模拟登陆

  连续登陆失败三次,就锁定用户