Tornado学习笔记(一) helloword/多进程/启动参数

时间:2021-06-23 09:14:48

前言

当你觉得你过得很舒服的时候,你肯定没有在进步。所以我想学习新的东西,然后选择了Tornado。因为我觉得Tornado更匹配目前的我的综合素质。

Tornado学习笔记系列主要参考《introduction to Tornado》一书,网上有中文版,地址为

http://demo.pythoner.com/itt2zh/index.html

当然也参考了大量博客,在此鸣谢!

本系列不适合完全的0基础小白。

简介

Tornado全称Tornado Web Server,是一个用Python语言写成的Web服务器兼Web应用框架,由FriendFeed公司在自己的网站FriendFeed中使用,被Facebook收购以后框架在2009年9月以开源软件形式开放给大众。

Tornado与其他Web框架的区别

以Django为代表的python web应用部署时采用wsgi协议与服务器对接(被服务器托管),而这类服务器通常都是基于多线程的,也就是说每一个网络请求服务器都会有一个对应的线程来用web应用(如Django)进行处理。

考虑两类应用场景

  1. 用户量大,高并发

    如秒杀抢购、双十一某宝购物、春节抢火车票

  2. 大量的HTTP持久连接

    使用同一个TCP连接来发送和接收多个HTTP请求/应答,而不是为每一个新的请求/应答打开新的连接的方法。

    对于HTTP 1.0,可以在请求的包头(Header)中添加Connection: Keep-Alive。

    对于HTTP 1.1,所有的连接默认都是持久连接。

对于这两种场景,通常基于多线程的服务器很难应对。

对于前面提出的这种高并发问题,我们通常用C10K这一概念来描述。C10K—— Concurrently handling ten thousandconnections,即并发10000个连接。对于单台服务器而言,根本无法承担,而采用多台服务器分布式又意味着高昂的成本。如何解决C10K问题?

Tornado在设计之初就考虑到了性能因素,旨在解决C10K问题,这样的设计使得其成为一个拥有非常高性能的解决方案(服务器与框架的集合体)。

Hello Word

第一个py

安装Tornado部分略过,我们直接进入正题,PyCharm没有新建Tornado项目的选项,我们直接新建一个py即可。

 # -*- coding=utf-8 -*-
import tornado.web
import tornado.ioloop class Index(tornado.web.RequestHandler):
# 封装一个类
def get(self):
# get请求进入该方法
# 返回字符串
self.write('Hello World') class Home(tornado.web.RequestHandler):
def get(self):
self.write('Home') if __name__ == '__main__':
app = tornado.web.Application([
# 相当于路由
(r'/', Index),
(r'/home', Home),
])
# 指定端口
app.listen(8000)
# 开启
tornado.ioloop.IOLoop.current().start()

我们直接启动即可,然后使用postman或者浏览器访问(我习惯使用postman)

http://localhost:8000

我们测试一下结果

Tornado学习笔记(一)  helloword/多进程/启动参数Tornado学习笔记(一)  helloword/多进程/启动参数

当服务器收到请求时会进入Application,进入路由顺序查找匹配。匹配到进入相关class,再根据方法进行处理

如果没有对应class报404,没有相应的方法报405

Tornado学习笔记(一)  helloword/多进程/启动参数Tornado学习笔记(一)  helloword/多进程/启动参数

开启多进程

之前说过Tornado的特点便是多进程,但是上面的代码是单进程的,我们需要修改代码来开启多进程

# -*- coding=utf-8 -*-
import tornado.web
import tornado.httpserver
import tornado.ioloop class Index(tornado.web.RequestHandler):
# 封装一个类
def get(self):
# get请求进入该方法
# 返回字符串
self.write('Hello World') class Home(tornado.web.RequestHandler):
def get(self):
self.write('Home') if __name__ == '__main__':
app = tornado.web.Application([
# 相当于路由
(r'/', Index),
(r'/home', Home),
])
# 手动生成server
http_server = tornado.httpserver.HTTPServer(app)
# 指定端口
http_server.bind(8000)
# 开启多进程
http_server.start(0)
# 开启
tornado.ioloop.IOLoop.current().start()

注意:指定多进程在linux上可行,在windows会报错,因为fork这个系统命令,只在linux中才有用。所以windows请留空(默认为1)或者填1

http_server.start(num_processes=1)方法指定开启几个进程,参数num_processes默认值为1,即默认仅开启一个进程;如果num_processes为None或者<=0,则自动根据机器硬件的cpu核芯数创建同等数目的子进程;如果num_processes>0,则创建num_processes个子进程。

虽然tornado给我们提供了一次开启多个进程的方法,但是由于:

  • 每个子进程都会从父进程中复制一份IOLoop实例,如过在创建子进程前我们的代码动了IOLoop实例,那么会影响到每一个子进程,势必会干扰到子进程IOLoop的工作;
  • 所有进程是由一个命令一次开启的,也就无法做到在不停服务的情况下更新代码;
  • 所有进程共享同一个端口,想要分别单独监控每一个进程就很困难。

不建议使用这种多进程的方式,而是手动开启多个进程,并且绑定不同的端口。

Tornado options组件(命令行加参数)

像端口这种易改变的配置写在代码里则会有解耦性的问题,这个时候我们就需要Tornado的options组件。他可以帮助我们实现全局参数的定义存储和转换。

tornado.options.define()

参数有

  • name 选项变量名,须保证全局唯一性,否则会报“Option 'xxx' already defined in ...”的错误;
  • default 选项变量的默认值,如不传默认为None;
  • type 选项变量的类型,从命令行或配置文件导入参数的时候tornado会根据这个类型转换输入的值,转换不成功时会报错,可以是str、float、int、datetime、timedelta中的某个,若未设置则根据default的值自动推断,若default也未设置,那么不再进行转换。可以通过利用设置type类型字段来过滤不正确的输入。
  • multiple 选项变量的值是否可以为多个,布尔类型,默认值为False,如果multiple为True,那么设置选项变量时值与值之间用英文逗号分隔,而选项变量则是一个list列表(若默认值和输入均未设置,则为空列表[])。
  • help 选项变量的帮助提示信息,在命令行启动tornado时,通过加入命令行参数 --help 可以查看所有选项变量的信息(注意,代码中需要加入tornado.options.parse_command_line())。
define("port", default=8000, help="run on the given port", type=int)

此处做到可以在启动时输入一个port,来指定端口,不传默认为8000,输入类型为int

python tdo_helloword.py --port=9000

指定端口为9000

那么代码修改为

# -*- coding=utf-8 -*-
import tornado.web
import tornado.ioloop
import tornado.httpserver
import tornado.options
# 可以多行
tornado.options.define("port", default=8000, help="run on the given port", type=int) class Index(tornado.web.RequestHandler):
# 封装一个类
def get(self):
# get请求进入该方法
# 返回字符串
self.write('Hello World') class Home(tornado.web.RequestHandler):
def get(self):
self.write('Home') if __name__ == '__main__':
# 注意加上这句
tornado.options.parse_command_line()
app = tornado.web.Application([
# 相当于路由
(r'/', Index),
(r'/home', Home),
])
# 手动生成server
http_server = tornado.httpserver.HTTPServer(app)
# 指定端口
http_server.bind(tornado.options.options.port)
# 开启多进程
http_server.start(1)
# 开启
tornado.ioloop.IOLoop.current().start()

我们在命令行加入port参数

python tdo_helloword.py --port=9999

查看效果

Tornado学习笔记(一)  helloword/多进程/启动参数

Tornado options组件(从配置文件导入)

配置文件格式要对

Tornado学习笔记(一)  helloword/多进程/启动参数

我们要更新一下代码

# -*- coding=utf-8 -*-
import tornado.web
import tornado.ioloop
import tornado.httpserver
import tornado.options
# 可以多行
tornado.options.define("port", default=8000, help="run on the given port", type=int) class Index(tornado.web.RequestHandler):
# 封装一个类
def get(self):
# get请求进入该方法
# 返回字符串
self.write('Hello World') class Home(tornado.web.RequestHandler):
def get(self):
self.write('Home') if __name__ == '__main__':
# 注意加上这句
# tornado.options.parse_command_line()
# 从文件读取配置
tornado.options.parse_config_file('./config')
app = tornado.web.Application([
# 相当于路由
(r'/', Index),
(r'/home', Home),
])
# 手动生成server
http_server = tornado.httpserver.HTTPServer(app)
# 指定端口
http_server.bind(tornado.options.options.port)
# 开启多进程
http_server.start(1)
# 开启
tornado.ioloop.IOLoop.current().start()

这样便是读取配置文件来启动tornado

关闭日志

在我们访问网站的时候,我们会发现屏幕打印了访问和返回的记录,我们可以将他关闭

Tornado学习笔记(一)  helloword/多进程/启动参数

想要关闭,我们可以在开启时加上--logging=none

python td_helloword.py --logging=none

或者修改代码为

 # -*- coding=utf-8 -*-
import tornado.web
import tornado.ioloop
import tornado.httpserver
import tornado.options
# 可以多行
tornado.options.define("port", default=8000, help="run on the given port", type=int) class Index(tornado.web.RequestHandler):
# 封装一个类
def get(self):
# get请求进入该方法
# 返回字符串
self.write('Hello World') class Home(tornado.web.RequestHandler):
def get(self):
self.write('Home') if __name__ == '__main__':
# 不打印日志
tornado.options.options.logging = None
tornado.options.parse_command_line()
# 从文件读取配置
# tornado.options.parse_config_file('./config')
app = tornado.web.Application([
# 相当于路由
(r'/', Index),
(r'/home', Home),
])
# 手动生成server
http_server = tornado.httpserver.HTTPServer(app)
# 指定端口
http_server.bind(tornado.options.options.port)
# 开启多进程
http_server.start(1)
# 开启
tornado.ioloop.IOLoop.current().start()