Python学习笔记之十一——标准库概览第Ⅰ部分

时间:2022-12-04 22:35:57

操作系统接口

os 模块提供了几十个函数与操作系统交互:

>>> import os 
>>> os.getcwd() # Return the current working directory
'C:\\Python34'
>>> os.chdir('/server/accesslogs') # Change current working directory
>>> os.system('mkdir today') # Run the command mkdir in the system shell
0

  一定要使用import os 的形式而不要用 from os import * 。这将使用os.open() 从而避免屏蔽内置的open() 函数,它们的功能完全不同。
内置的dir() 和help() 函数对于使用像os 这样的大型模块可以提供非常有用的交互式帮助:

>>> import os 
>>> dir(os)
<returns a list of all module functions>
>>> help(os)
<returns an extensive manual page created from the module's docstrings>

对于日常的文件和目录管理任务,shutil 模块提供了一个易于使用的高级接口:

>>> import shutil 
>>> shutil.copyfile('data.db', 'archive.db')
'archive.db'
>>> shutil.move('/build/executables', 'installdir')
'installdir'

文件通配符

glob 模块提供了一个函数用于在目录中以通配符搜索文件,并生成匹配的文件列表:

>>> import glob 
>>> glob.glob('*.py')
['primes.py', 'random.py', 'quote.py']

命令行参数

常见的实用程序脚本通常需要处理命令行参数。这些参数以一个列表存储在sys模块的argv 属性中。例如下面的输出结果来自于从命令行运行 python demo.py

>>> import sys 
>>> print(sys.argv)
['demo.py', 'one', 'two', 'three']

getopt模块使用Unix getopt()函数的约定处理sys.argv。argparse模块提供更强大、 更灵活的命令行处理功能。

错误输出重定向和程序终止

sys模块还具有stdin、stdout和stderr属性。即使在stdout被重定向时,后者也可以用于显示警告和错误信息:

>>> sys.stderr.write('Warning, log file not found starting a new one\n') 
Warning, log file not found starting a new one

终止脚本最直接的方法是使用sys.exit()

字符串模式匹配

re 模块为高级的字符串处理提供了正则表达式工具。对于复杂的匹配和操作,正则表达式提供了简洁、优化的解决方案:

>>> import re 
>>> re.findall(r'\bf[a-z]*', 'which foot or hand fell fastest')
['foot', 'fell', 'fastest']

当只需要简单的功能时,最好使用字符串方法,因为它们更容易阅读和调试:

>>> 'tea for too'.replace('too', 'two') 
'tea for two'

数学

math 模块为浮点运算提供了对底层C函数库的访问:

>>> import math 
>>> math.cos(math.pi / 4.0)
0.70710678118654757
>>> math.log(1024, 2)
10.0

random 模块提供了进行随机选择的工具:

>>> import random 
>>> random.choice(['apple', 'pear', 'banana'])
'apple'
>>> random.sample(range(100), 10) # sampling without replacement
[30, 83, 16, 4, 8, 81, 41, 50, 18, 33]
>>> random.random() # random float
0.17970987693706186
>>> random.randrange(6) # random integer chosen from range(6)
4

注意:SciPy项目http://scipy.org有很多其它用于数值计算的模块。

互联网访问

有很多的模块用于访问互联网和处理的互联网协议。最简单的两个是从 URL 获取数据的urllib.request 和发送邮件的smtplib:

>>> from urllib.request import urlopen 
>>> with urlopen('http://tycho.usno.navy.mil/cgi-bin/timer.pl') as response:
... for line in response:
... line = line.decode('utf-8') # Decoding the binary data to text.
... if 'EST' in line or 'EDT' in line: # look for Eastern Time
... print(line)
<BR>Nov. 25, 09:43:32 PM EST
>>> import smtplib
>>> server = smtplib.SMTP('localhost')
>>> server.sendmail('soothsayer@example.org', 'jcaesar@example.org',
... """To: jcaesar@example.org
... From: soothsayer@example.org
...
... Beware the Ides of March.
... "
"")
>>> server.quit()

(可能由于网络原因无法访问,另外第二个示例需要在本地主机上运行邮件服务器,这里只是作为一个演示说明)。

日期和时间

 datetime模块提供了处理日期和时间的类,既有简单的方法也有复杂的方法。支持日期和时间算法的同时,实现的重点放在更有效的处理和格式化输出。该模块还支持处理时区。

>>> # dates are easily constructed and formatted 
>>> from datetime import date
>>> now = date.today()
>>> now
datetime.date(2016, 09, 08)
>>> now.strftime("%m-%d-%y. %d %b %Y is a %A on the %d day of %B.")
'09-08-16.08 Sep 2016 is a Thursday on the 08 day of September.'
>>> # dates support calendar arithmetic
>>> birthday = date(1989,03,01)
>>> age = now - birthday
>>> age.days
10053

数据压缩

常见的数据打包和压缩格式有模块直接支持,包括:zlib,gzip,bz2,lzma,zipfile 和tarfile.

>>> import zlib 
>>> s = b'witch which has which witches wrist watch'
>>> len(s)
41
>>> t = zlib.compress(s)
>>> len(t)
37
>>> zlib.decompress(t)
b'witch which has which witches wrist watch'
>>> zlib.crc32(s)
226805979

性能度量

 一些 Python 用户对同一问题的不同解决方法之间的性能差异深有兴趣。Python 提供了的一个度量工具可以立即解决这些问题。 例如,使用元组封装和拆封功能而不是传统的方法来交换参数可能会更吸引人。timeit模块
快速展示了一个温和的性能优势 :

>>> from timeit import Timer 
>>> Timer('t=a; a=b; b=t', 'a=1; b=2').timeit()
0.57535828626024577
>>> Timer('a,b = b,a', 'a=1; b=2').timeit()
0.54962537085770791

注:在第二个例子中 a和b 交互参数的方式和其他语言不太一样,原因是1和2 这两个值一旦产生,在内存中的位置是定的,a和b 就相当于是两个引用变量,和C语言中的指针类似,交换过程中,值在内存中的位置并不变,两者只是把内存地址交换了一下。
与timeit的精细的粒度相反,profile和pstats模块提供了针对更大代码块的时间度量工具。

质量控制

开发高质量软件的方法之一是为每一个函数编写测试代码,并且在开发过程中经常性的运行这些测试代码。
doctest 模块提供一个工具,扫描模块并根据程序中内嵌的文档字符串执行测试。测试的构造像一个把结果剪切并粘贴到文档字符串的典型调用一样简单。
通过用户提供的例子,它发展了文档,允许 doctest 模块确认代码的结果是否与文档一致:

def average(values): 
"""Computes the arithmetic mean of a list of numbers.

>>> print(average([20, 30, 70]))
40.0
"""

return sum(values) / len(values)

import doctest
doctest.testmod() # automatically validate the embedded tests

unittest 模块不像 doctest 模块那样容易,不过它可以在一个独立的文件里提供一个更全面的测试集:

""" writed by jeff
"""

import unittest
def average(values):
"""Computes the arithmetic mean of a list of numbers.
>>> print(average([20, 30, 70]))
40.0
"""

return sum(values) / len(values)
class TestStatisticalFunctions(unittest.TestCase):

def test_average(self):
self.assertEqual(average([20,30,70]),40.0)
self.assertEqual(round(average([1, 5, 7]), 1), 4.3)
with self.assertRaises(ZeroDivisionError):
average([])
with self.assertRaises(TypeError):
average(20,30,70)
if __name__ == "__main__":
unittest.main()

输出结果:

.
----------------------------------------------------------------------

Ran 1 test in 0.000s

OK