一、网站的基本架构

1、MVC模式

MVC模式是一个非常好的软件架构模式,在网站开发中,也常常要求遵守这个模式。

MVC模式(Model-View-Controller)是软件工程中的一种软件架构模式,把软件系统分为三个基本部分:模型(Model)、视图(View)和控制器(Controller)。

MVC模式最早由Trygve Reenskaug在1978年提出,是施乐帕罗奥多研究中心(Xerox PARC)在20世纪80年代为程序语言Smalltalk发明的一种软件设计模式。MVC模式的目的是实现一种动态的程式设计,使后续对程序的修改和扩展简化,并且使程序某一部分的重复利用成为可能。除此之外,此模式通过对复杂度的简化,使程序结构更加直观。软件系统通过对自身基本部分分离的同时也赋予了各个基本部分应有的功能。专业人员可以通过自身的专长分组:

(控制器 Controller)- 负责转发请求,对请求进行处理。

(视图 View) - 界面设计人员进行图形界面设计。 -(模型 Model) - 程序员编写程序应有的功能(实现算法等等)、数据库专家进行数据管理和数据库设计(可以实现具体的功能)。

2、前端

所谓前端就是指用浏览器打开之后看到的那部分,它是呈现网站传过来的信息的界面,也是用户和网站之间进行信息交互的界面。前端开发,一般使用HTML/CSS/JS,当然,非要用python也不是不可以,但这势必造成以后维护困难。

前端所实现的功能主要有:

呈现内容。这些内容是根据url,由后端从数据库中提取出来的。前端将其按照一定的样式呈现出来。另外,有一些内容,不是后端数据库提供的,是写在前端的。

用户与网站交互。现在的网站,这是必须的,比如用户登录。当用户在指定的输入框中输入信息之后,该信息就是被前端提交给后端,后端对这个信息进行处理之后,在一般情况下都要再反馈给前端一个处理结果,然后前端呈现给用户。

3、后端

这里所说的后端,对应着MVC中的Controller和Model的部分或者全部功能,因为在我们的图中,“后端”是一个狭隘的概念,没有把数据库放在其内。

主要任务就是根据需要处理由前端发过来的各种请求,根据请求的处理结果,一方面操作数据库(对数据库进行增删改查),另外一方面把请求的处理结果反馈给前端。

4、数据库

工作比较单一,就是面对后端的python程序,任其增删改查。

二、基于Tornado的基本框架

1、tornado中的文件目录

/.

|

handlers

|

methods

|

statics

|

templates

|

application.py

|

server.py

|

url.py

有了这个文件架构,后面的事情就是在这个基础上添加具体内容了。

依次说明上面的架势中每个目录和文件的作用:

handlers:在这个文件夹中放前面所说的后端python程序,主要处理来自前端的请求,并且操作数据库。

methods:放一些函数或者类,比如用的最多的读写数据库的函数,这些函数被handlers里面的程序使用。

statics:放一些静态文件,比如图片,css和javascript文件等。

templates:放模板文件,都是以html为扩展名的,它们将直接面对用户。

url.py文件:

#!/usr/bin/env python

# coding=utf-8

import sys    #utf-8,兼容汉字

reload(sys)

sys.setdefaultencoding("utf-8")

from handlers.index import IndexHandler    #假设已经有了

url = [

(r'/', IndexHandler),

]

/*

url.py文件主要是设置网站的目录结构。from handlers.index import IndexHandler,虽然在handlers文件夹还没有什么东西,为了演示如何建立网站的目录结构,假设在handlers文件夹里面已经有了一个文件index.py,它里面还有一个类IndexHandler。在url.py文件中,将其引用过来。

变量url指向一个列表,在列表中列出所有目录和对应的处理类。比如(r'/', IndexHandler),,就是约定网站根目录的处理类是IndexHandler,即来自这个目录的get()或者post()请求,均有IndexHandler类中相应方法来处理。

*/

application.py文件:

#!/usr/bin/env python

# coding=utf-8

from url import url

import tornado.web

import os

settings = dict(

template_path = os.path.join(os.path.dirname(__file__), "templates"),

static_path = os.path.join(os.path.dirname(__file__), "statics")

)

application = tornado.web.Application(

handlers = url,

**settings

)

/*

从内容中可以看出,这个文件完成了对网站系统的基本配置,建立网站的请求处理集合。

from url import url是将url.py中设定的目录引用过来。

setting引用了一个字典对象,里面约定了模板和静态文件的路径,即声明已经建立的文件夹"templates"和"statics"分别为模板目录和静态文件目录。

接下来的application就是一个请求处理集合对象。请注意tornado.web.Application()的参数设置:

tornado.web.Application(handlers=None, default_host='', transforms=None, **settings)

关于settings的设置,不仅仅是文件中的两个,还有其它,比如,如果填上debug = True就表示出于调试模式。调试模式的好处就在于有利于开发调试,但是,在正式部署的时候,最好不要用调试模式。

*/

server.py文件:

这个文件的作用是将tornado服务器运行起来,并且囊括前面两个文件中的对象属性设置。

#!/usr/bin/env python

# coding=utf-8

import tornado.ioloop

import tornado.options

import tornado.httpserver

from application import application

from tornado.options import define, options

define("port", default = 8000, help = "run on the given port", type = int)

def main():

tornado.options.parse_command_line()

http_server = tornado.httpserver.HTTPServer(application)

http_server.listen(options.port)

print "Development server is running at http://127.0.0.1:%s" % options.port

print "Quit the server with Control-C"

tornado.ioloop.IOLoop.instance().start()

if __name__ == "__main__":

main()

三、连接数据库

#!/usr/bin/env python

# coding=utf-8

import pymysql

conn = pymysql.connect(host="localhost", user="root", passwd="123123", db="qiwsirtest", port=3306, charset="utf8")    #连接对象

cur = conn.cursor()    #游标对象

四、基本功能实现流程(用户登录)

1 前端应实现的登陆逻辑图

2 在实现前端登陆的基础上,在后端进行url配置及登陆状态处理

# 1、登陆功能的url配置:(url.py文件中)

from handlers.index import IndexHandler

url = [

(r'/', IndexHandler),

]

# 2、登陆状态处理:(在handlers里面建立index.py文件:

#!/usr/bin/env python

# coding=utf-8

import tornado.web

class IndexHandler(tornado.web.RequestHandler):

def get(self):

self.render("index.html")    # 去往登陆页面

当访问根目录的时候,不论输入localhost:8000,还是http://127.0.0.1:8000,或者网站域名,都会将相应的请求交给handlers目录中的index.py文件中的IndexHandler类的get()方法来处理,它的处理结果是呈现index.html模板内容。

render()函数的功能在于向请求者反馈网页模板,并且可以向模板中传递数值。

特别注意,在handlers目录中,不要缺少了__init__.py文件,因为这里面的文件要在别处被当做模块引用.

3 测试(多次使用)

3.1 运行服务

找到server.py文件,运行它:

$ python server.py

Development server is running at http://127.0.0.1:8000

Quit the server with Control-C

3.2 访问

打开浏览器,输入http://localhost:8000或者http://127.0.0.1:8000

四、数据传输

在已经建立了前端表单之后,就要实现前端和后端之间的数据传递。在工程中,常用到一个被称之为ajax()的方法。

4.1 前端使用ajax()进行数据传输,示例如下:

$(document).ready(function(){

$("#login").click(function(){

var user = $("#username").val();    // 从前端捕获到数据1

var pwd = $("#password").val();    // 从前端捕获到数据2

var pd = {"username":user, "password":pwd};    // 数据json格式

$.ajax({

type:"post",        // 请求方式

url:"/",            // 请求地址

data:pd,            // 传输数据内容

cache:false,

success:function(data){

alert(data);

},

error:function(){

alert("error!");

},

});

});

});

type:post还是get。

url:post或者get的地址

data:传输的数据,包括三种:(1)html拼接的字符串;(2)json数据;(3)form表单经serialize()序列化的。本例中传输的就是json数据,这也是经常用到的一种方式。

cache:默认为true,如果不允许缓存,设置为false.

success:请求成功时执行回调函数。本例中,将返回的data用alert方式弹出来。读者是否注意到,我在很多地方都用了alert()这个东西,目的在于调试,走一步看一步,看看得到的数据是否如自己所要。也是有点不自信呀。

error:如果请求失败所执行的函数。

4.2 后端接受数据:

前端通过ajax技术,将数据以 json格式 传给了后端,并且指明了对象目录"/",这个目录在url.py文件中已经做了配置,是由handlers目录的index.py文件的IndexHandler类来处理。因为是用post方法传的数据,那么在这个类中就要有post方法来接收数据。所以,要在IndexHandler类中增加post()方法,增加之后的完善代码是:

#!/usr/bin/env python

# coding=utf-8

import tornado.web

class IndexHandler(tornado.web.RequestHandler):

def get(self):

self.render("index.html")

def post(self):

username = self.get_argument("username")  # 获取前端传来的数据1

password = self.get_argument("password")  # 获取前端传来的数据2

self.write(username)                  # 向前端返回数据

get_argument(name, default=[], strip=True)

# 它能够获取name的值。(name就是从前端传到后端的那个json对象的键的名字)

# 如果获取不到name的值,就返回default的值,但是这个值默认是没有的,如果真的没有就会抛出HTTP 400。# # 要想获取多个值,可以使用get_arguments(name, strip=true)。

self.write(username)

# 是后端向前端返回数据。这里返回的实际上是一个字符串,也可返回json字符串。

4.3 验证数据(用户名和密码)

按照流程,用户在前端输入了用户名和密码,并通过ajax提交到了后端,后端借助于get_argument()方法得到了所提交的数据(用户名和密码)。下面要做的事情就是验证这个用户名和密码是否合法,其体现在:

数据库中是否有这个用户

密码和用户先前设定的密码(已经保存在数据库中)是否匹配

这个验证工作完成之后,才能允许用户登录,登录之后才能继续做某些事情。

首先,在methods目录中创建一个db.py文件,用于数据库操作:

# 该方法实现从数据库中查询,并返回查询结果

def select_table(table, column, condition, value ):

sql = "select " + column + " from " + table + " where " + condition + "='" + value + "'"

cur.execute(sql)

lines = cur.fetchall()

return lines

有了这段代码之后,就进一步改写index.py中的post()方法:

def post(self):

username = self.get_argument("username")

password = self.get_argument("password")

user_infos = mrd.select_table(

table="users",column="*",condition="username",value=username)

if user_infos:

db_pwd = user_infos[0][2]

if db_pwd == password:

self.write("welcome you: " + username)

else:

self.write("your password was not right.")

else:

self.write("There is no thi user.")

特别注意,在methods目录中,不要缺少了__init__.py文件,因为这里面的文件要在别处被当做模块引用,才能在index.py中实现import methods.db

4.4 重复(步骤3)测试功能

五、模板使用

模板主要针对前端页面的html来说,因为前端页面要显示从后端读取出来的数据,在前端页面中获取数据的位置,用变量或标签代替,就实现了模板功能。tornado提供比较好用的前端模板(tornado.template)。通过使用模板,能够让前端开发者的编写不受后端的限制。

# 模板中的变量:

1、使用变量的语法:{{ 变量名 }}

2、从变量(列表、元组、字典)中取值,用索引或键的方式

# 模板中的标签:

for循环:

{% for  变量  in  列表 | 元组 | 字典 %}

{% endfor %}

# 允许使用 for 提供的内置变量  - forloop

1、forloop.counter    # 记录当前循环的次数,从1开始

2、forloop.first      # 是否是第一次循环(第一项)

3、forloop.last      # 是否是最后一次循环(最后一项)

if条件语句:

1、

{% if  条件 %}

满足条件要运行的内容

{% endif %}

2、

{% if %}

满足条件要运行的内容

{% else %}

不满足条件要运行的内容

{% endif %}

3、

{% if  条件1 %}

满足条件1要运行的内容

{% elif  条件2 %}

满足条件2要运行的内容

{% elif  条件3 %}

满足条件3要运行的内容

{% else %}

不满足条件要运行的内容

{% endif %}

# 条件中允许使用 (比较运算符>  =    <=  ==  !=)

#                (逻辑运算符 not  and  or)

# 但是:and  和  or  不能同时出现

示例功能:用户正确登录之后,跳转到另外一个页面,并且在那个页面中显示出用户的完整信息

1、先修改url.py文件,在其中增加一些内容。完整代码如下:

#!/usr/bin/env python

# coding=utf-8

import sys

reload(sys)

sys.setdefaultencoding("utf-8")

from handlers.index import IndexHandler

from handlers.user import UserHandler

url = [

(r'/', IndexHandler),

(r'/user', UserHandler),    // 新的url地址

]

2、然后就建立handlers/user.py文件,内容如下:

#!/usr/bin/env python

# coding=utf-8

import tornado.web

import methods.readdb as mrd

class UserHandler(tornado.web.RequestHandler):

def get(self):

username = self.get_argument("user")

user_infos = mrd.select_table(

table="users",column="*",condition="username",value=username)

self.render("user.html", users = user_infos)    # 将查询到的用户信息返回给前端

注意:上述的user.py代码为了简单突出本将要说明的,没有对user_infos的结果进行判断。在实际的编程中,这要进行判断或者使用try...except。

3、前端的user.html模板文件,注意传入的引用对象user_infos不是一个字符串了,是一个元组。内容如下:

Learning Python

Your informations are:

{% for one in users %}    # 使用for循环遍历传入的对象

username:{{one[1]}}  # 索引获取元素password:{{one[2]}}email:{{one[3]}}

{% end %}

六、模板继承

实际工作中有很多模板都有相同的部分内容,在tornado的模板中有一种“继承”的机制,它的作用之一就是能够让代码重用。

6.1 先建立一个文件,命名为base.html,代码如下:

Learning Python

{% block header %}

{% end %}

{% block body %}

{% end %}

{% set website = "welcome to my website" %}

{% raw website %}

6.2 接下来就以base.html为父模板,依次改写已经有的index.html和user.html模板

index.html代码如下:

{% extends "base.html" %}

{% block header %}

登录页面

用用户名为:{{user}}登录

{% end %}

{% block body %}

UserName:

Password:

{% end %}

user.html的代码如下:

{% extends "base.html" %}

{% block header %}

Your informations are:

{% end %}

{% block body %}

{% for one in users %}

username:{{one[1]}}password:{{one[2]}}email:{{one[3]}}

{% end %}

{% end %}

七、cookie和安全

因为HTTP协议是无状态的,即服务器不知道用户上一次做了什么,这严重阻碍了交互式Web应用程序的实现。

典型场景1:在网上购物中,用户浏览了几个页面,买了一盒饼干和两瓶饮料。最后结帐时,由于HTTP的无状态性,不通过额外的手段,服务器并不知道用户到底买了什么。 所以Cookie就是用来绕开HTTP的无状态性的“额外手段”之一。服务器可以设置或读取Cookies中包含信息,借此维护用户跟服务器会话中的状态。

在刚才的购物场景中,当用户选购了第一项商品,服务器在向用户发送网页的同时,还发送了一段Cookie,记录着那项商品的信息。当用户访问另一个页面,浏览器会把Cookie发送给服务器,于是服务器知道他之前选购了什么。用户继续选购饮料,服务器就在原来那段Cookie里追加新的商品信息。结帐时,服务器读取发送来的Cookie就行了。

典型场景2:当登录一个网站时,网站往往会请求用户输入用户名和密码,并且用户可以勾选“下次自动登录”。如果勾选了,那么下次访问同一网站时,用户会发现没输入用户名和密码就已经登录了。这正是因为前一次登录时,服务器发送了包含登录凭据(用户名加密码的某种加密形式)的Cookie到用户的硬盘上。第二次登录时,(如果该Cookie尚未到期)浏览器会发送该Cookie,服务器验证凭据,于是不必输入用户名和密码就让用户登录了。

和任何别的事物一样,cookie也有缺陷:

cookie会被附加在每个HTTP请求中,所以无形中增加了流量。

由于在HTTP请求中的cookie是明文传递的,所以安全性成问题。(除非用HTTPS)

Cookie的大小限制在4KB左右。对于复杂的存储需求来说是不够用的。

对于用户来讲,可以通过改变浏览器设置,来禁用cookie,也可以删除历史的cookie。但就目前而言,禁用cookie的可能不多了,因为你总要在网上买点东西吧。

Cookie最让人担心的还是由于它存储了用户的个人信息,并且最终这些信息要发给服务器,那么它就会成为某些人的目标或者工具,比如有cookie盗贼,就是搜集用户cookie,然后利用这些信息进入用户账号,达到个人的某种不可告人之目的;还有被称之为cookie投毒的说法,是利用客户端的cookie传给服务器的机会,修改传回去的值。这些行为常常是通过一种被称为“跨站指令脚本(Cross site scripting)”(或者跨站指令码)的行为方式实现的。

跨网站脚本(Cross-site scripting,通常简称为XSS或跨站脚本或跨站脚本攻击)是一种网站应用程序的安全漏洞攻击,是代码注入的一种。它允许恶意用户将代码注入到网页上,其他用户在观看网页时就会受到影响。这类攻击通常包含了HTML以及用户端脚本语言。

XSS攻击通常指的是通过利用网页开发时留下的漏洞,通过巧妙的方法注入恶意指令代码到网页,使用户加载并执行攻击者恶意制造的网页程序。这些恶意网页程序通常是JavaScript,但实际上也可以包括Java, VBScript, ActiveX, Flash 或者甚至是普通的HTML。攻击成功后,攻击者可能得到更高的权限(如执行一些操作)、私密网页内容、会话和cookie等各种内容。

cookie是好的,被普遍使用。在tornado中,也提供对cookie的读写函数。

set_cookie()    # 写入cookie值

get_cookie()    # 获取cookie值

# 是tornado默认提供的两个方法,但是它是明文不加密传输的。

在index.py文件的IndexHandler类的post()方法中,当用户登录,验证用户名和密码后,将用户名和密码存入cookie,代码如下:

def post(self):

username = self.get_argument("username")

password = self.get_argument("password")

user_infos = mrd.select_table(

table="users",column="*",condition="username",value=username)

if user_infos:

db_pwd = user_infos[0][2]

if db_pwd == password:

self.set_cookie(username,db_pwd)    #将用户信息存入cookie

self.write(username)

else:

self.write("your password was not right.")

else:

self.write("There is no thi user.")

tornado提供另外一种(非绝对)安全的方法:

set_secure_cookie()      # 写入cookie信息(加密)

get_secure_cookie()      # 获取cookie信息(加密)

# 这种方法称其为安全cookie,是因为它以明文加密方式传输。

跟set_cookie()的区别还在于, set_secure_cookie()执行后的cookie保存在磁盘中,直到它过期为止。也是因为这个原因,即使关闭浏览器,在失效时间之间,cookie都一直存在。

要是用set_secure_cookie()方法设置cookie,要先在application.py文件的setting中进行如下配置:

setting = dict(

template_path = os.path.join(os.path.dirname(__file__), "templates"),

static_path = os.path.join(os.path.dirname(__file__), "statics"),

cookie_secret = "bZJc2sWbQLKos6GkHn/VB9oXwQt8S0R0kRvJ5/xJ89E=",

)

其中cookie_secret = "bZJc2sWbQLKos6GkHn/VB9oXwQt8S0R0kRvJ5/xJ89E="是新增加的,但是,它并不是真正的加密,仅仅是一个障眼法罢了。

因为tornado会将cookie值编码为Base-64字符串,并增加一个时间戳和一个cookie内容的HMAC签名。所以,cookie_secret的值,常常用下面的方式生成(这是一个随机的字符串):

>>> import base64, uuid

>>> base64.b64encode(uuid.uuid4().bytes)

'w8yZud+kRHiP9uABEXaQiA=='

如果嫌弃上面的签名短,可以用base64.b64encode(uuid.uuid4().bytes + uuid.uuid4().bytes)获取。这里得到的是一个随机字符串,用它作为 cookie_secret值。然后修改index.py中设置cookie那句话,变成:

self.set_secure_cookie(username, db_pwd, httponly=True, secure=True)

如果要获取此cookie,用 self.get_secure_cookie(username) 即可。

八、XSRF 跨站请求伪造

这种对网站的攻击方式跟上面的跨站脚本(XSS)似乎相像,但攻击方式不一样。XSS利用站点内的信任用户,而XSRF则通过伪装来自受信任用户的请求来利用受信任的网站。与XSS攻击相比,XSRF攻击往往不大流行(因此对其 进行防范的资源也相当稀少)和难以防范,所以被认为比XSS更具危险性。

对于防范XSRF的方法,上面推荐阅读的文章中有明确的描述。还有一点需要提醒读者,就是在开发应用时需要深谋远虑。任何会产生副作用的HTTP请求,比如点击购买按钮、编辑账户设置、改变密码或删除文档,都应该使用post()方法。这是良好的RESTful做法。

在tornado中,提供了XSRF保护的方法。在application.py文件中,使用xsrf_cookies参数开启XSRF保护。

setting = dict(

template_path = os.path.join(os.path.dirname(__file__), "templates"),

static_path = os.path.join(os.path.dirname(__file__), "statics"),

cookie_secret = "bZJc2sWbQLKos6GkHn/VB9oXwQt8S0R0kRvJ5/xJ89E=",

xsrf_cookies = True,

)

这样设置之后,Tornado将拒绝请求参数中不包含正确的 _xsrf 值的 post/put/delete 请求。tornado会在后面悄悄地处理xsrf_cookies,所以,在表单中也要包含XSRF令牌以却表请求合法。比如 index.html 的表单,修改如下:

{% extends "base.html" %}

{% block header %}

登录页面

用用户名为:{{user}}登录

{% end %}

{% block body %}

{% raw xsrf_form_html() %}

UserName:

Password:

{% end %}

{% raw xsrf_form_html() %}   -- 是新增的,目的就在于实现上面所说的授权给前端以合法请求。

前端向后端发送的请求是通过ajax(),所以,在ajax请求中,需要一个_xsrf参数。以下是script.js的代码

function getCookie(name){

var x = document.cookie.match("\\b" + name + "=([^;]*)\\b");

return x ? x[1]:undefined;

}

$(document).ready(function(){

$("#login").click(function(){

var user = $("#username").val();

var pwd = $("#password").val();

var pd = {"username":user, "password":pwd, "_xsrf":getCookie("_xsrf")};

$.ajax({

type:"post",

url:"/",

data:pd,

cache:false,

success:function(data){

window.location.href = "/user?user="+data;

},

error:function(){

alert("error!");

},

});

});

});

函数 getCookie() 的作用是得到cookie值,然后将这个值放到向后端post的数据中。

这是tornado提供的XSRF防护方法。是不是这样做就高枕无忧了呢?没这么简单。要做好一个网站,需要考虑的事情还很多。

九、session

十、同步和异步(并发访问)

所谓同步,就是在发出一个“请求”时,在没有得到结果之前,该“请求”就不返回。但是一旦请求返回,就得到返回值了。 换句话说,就是由“请求发起者”主动等待这个“请求”的结果。

而异步则是相反,“请求”在发出之后,这个请求就直接返回了,但没有返回结果。换句话说,当一个异步过程请求发出后,请求者不会立刻得到结果。而是在“请求”发出后,“被请求者”通过状态、通知来通知请求者,或通过回调函数处理这个请求。

同步典型案例:(打电话)张三给李四打电话,张三说:“是李四吗?”。当这个信息被张三发出,提交给李四,就等待李四的响应(一般会听到“是”,或者“不是”),只有得到了李四返回的信息之后,才能进行后续的信息传送。

异步典型案例:(发短信)张三给李四发短信,编辑了一句话“今晚一起看老齐的零基础学python”,发送给李四。李四或许马上回复,或许过一段时间,这段时间多长也不定,才回复。总之,李四不管什么时候回复,张三会以听到短信铃声为提示查看短信。

阻塞和非阻塞

“阻塞和非阻塞”与“同步和异步”常常被换为一谈,其实它们之间还是有差别的。

阻塞和非阻塞关注的是程序在等待调用结果(消息,返回值)时的状态.

阻塞调用是指调用结果返回之前,当前线程会被挂起。调用线程只有在得到结果之后才会返回。非阻塞调用指在不能立刻得到结果之前,该调用不会阻塞当前线程。

按照这个说明,发短信就是显然的非阻塞,发出去一条短信之后,你利用手机还可以干别的。

10.1 tornado的同步

此前,在tornado基础上已经完成的web,就是同步的、阻塞的。

10.2 tornado的异步

tornado提供了一套异步机制,就是异步装饰器1: @tornado.web.asynchronous + 回调函数

#!/usr/bin/env python

# coding=utf-8

import tornado.web

from base import BaseHandler

import time

class SleepHandler(BaseHandler):

@tornado.web.asynchronous

def get(self):

tornado.ioloop.IOLoop.instance().add_timeout(

time.sleep(17), callback=self.on_response)

def on_response(self):            # 回调函数

self.render("sleep.html")

self.finish()

@tornado.web.asynchronous :它的作用在于将tornado服务器本身默认的设置 _auto_fininsh 值修改为 false。如果不用这个装饰器,客户端访问服务器的 get() 方法并得到返回值之后,两只之间的连接就断开了,但是用了 @tornado.web.asynchronous 之后,这个连接就不关闭,直到执行了 self.finish() 才关闭这个连接。

异步装饰器2: @tornado.gen.coroutine + 生成器

import time

class SleepHandler(tornado.web.RequestHandler):

@tornado.gen.coroutine

def get(self):

yield tornado.gen.Task(

tornado.ioloop.IOLoop.instance().add_timeout, time.sleep(17))

self.render("sleep.html")

yield tornado.gen.Task(tornado.ioloop.IOLoop.instance().add_timeout, time.sleep(17)) 中的 tornado.gen.Task() 方法,其作用是“Adapts a callback-based asynchronous function for use in coroutines.”。返回后,最后使用yield得到了一个生成器,先把流程挂起,等完全完毕,再唤醒继续执行。要提醒读者,生成器都是异步的。

10.3 实践中的异步

如果在tornado中按照之前的方式只用它们,以下各项同步(阻塞)的,就会削减tornado的非阻塞、异步优势:

数据库的所有操作,不管你的数据是SQL还是noSQL,connect、insert、update等

文件操作,打开,读取,写入等

time.sleep,在前面举例中已经看到了

smtplib,发邮件的操作

一些网络操作,比如tornado的httpclient以及pycurl等

除了以上,或许在编程实践中还会遇到其他的同步、阻塞问题,怎么解决?聪明的大牛程序员帮我们做了扩展模块,专门用来实现异步/非阻塞的。

在数据库方面,由于种类繁多,不能一一说明,比如mysql,可以使用adb模块来实现python的异步mysql库;对于mongodb数据库,有一个非常优秀的模块,专门用于在tornado和mongodb上实现异步操作,它就是motor。特别贴出它的logo,我喜欢。官方网站:http://motor.readthedocs.org/en/stable/上的安装和使用方法都很详细。

文件操作方面也没有替代模块,只能尽量控制好IO,或者使用内存型(Redis)及文档型(MongoDB)数据库。

time.sleep() 在tornado中有替代:tornado.gen.sleep()或者tornado.ioloop.IOLoop.instance().add_timeout,这在前面代码已经显示了。

smtp发送邮件,推荐改为tornado-smtp-client。

对于网络操作,要使用tornado.httpclient.AsyncHTTPClient。

其它的解决方法,只能看到问题具体说了,甚至没有很好的解决方法。不过,这里有一个列表,列出了足够多的库,供使用者选择:Async Client Libraries built on tornado.ioloop,同时这个页面里面还有很多别的链接,都是很好的资源,建议读者多看看。

————————————————

版权声明:本文为CSDN博主「随风奔跑之水」的原创文章,遵循 CC 4.0 BY-SA 版权协议,转载请附上原文出处链接及本声明。

原文链接:https://blog.csdn.net/weixin_40873462/article/details/90237618

python tornado实战_python-web之tornado实战篇相关推荐

  1. python 服务框架_Python Web服务高并发框架【1】(Tornado)

    本节学习目标: (1)了解Tornado的特点 (2)了解Tornado工作流程 (3)掌握Tornado在Window及Linux中的安装 (4)理解同步.异步 (5)协程基础编程 本节课程内容: ...

  2. 畅游Python 二十一:Web框架 - Tornado

    Tornado 是 FriendFeed 使用的可扩展的非阻塞式 web 服务器及其相关工具的开源版本.这个 Web 框架看起来有些像web.py 或者 Google 的 webapp,不过为了能有效 ...

  3. web python识花_Python Web开发之初认识

    一.具备技术能力至少熟悉一种Python web框架 熟悉Python语法 熟悉数据库.缓存.消息队列等技术的使用场景.使用方法 日常能使用Linux或Mac系统工作 有性能调优经验,能快速定位问题 ...

  4. python网络编程实战_Python 异步网络编程实战

    近年来 Python 的发展的非常迅速,"简单"."高效"是 Python 吸引人的一大特色.在国内 Python 开发需求越来越大,Python 具有丰富强大 ...

  5. python 股票数据挖掘_python数据分析之股票实战

    原标题:python数据分析之股票实战 数据挖掘入门与实战 公众号: datadw 对于股票的研究我想,无论是专业人士还是非专业人士都对其垂涎已久,因为我们都有赌徒的心态,我们都希望不花太多的时间但是 ...

  6. Python结合mysql的实战_python连接mysql,实战。实现ATM类似功能。

    数据库,表建立. create database `mydata`; DROP TABLE IF EXISTS `mytab`; CREATE TABLE `mytab` ( `userid` int ...

  7. python如何期货交易_Python期货量化交易实战

    版 权 版权声明 内容提要 序言1 序言2 资源与支持 第1章 Python的基本语法 技巧1 [概念]Python的诞生与发展 技巧2 [操作]安装Python的基本环境 技巧3 [操作]Pytho ...

  8. python期货量化交易实战_Python期货量化交易实战

    ·了解交易的规则与数据指标,学习正确的金融算法·基于真实的数据进行回测和分析,了解期货交易的内涵·循序渐进的案例式教学,按部就班地操作就能上手·基于Python 3.7进行分析,提供示例代码,可在异步 ...

  9. python数据统计_Python数据分析--Iris数据集实战

    Apple iPhone 11 (A2223) 128GB 黑色 移动联通电信4G手机 双卡双待 4999元包邮 去购买 > 本次主要围绕Iris数据集进行一个简单的数据分析, 另外在数据的可视 ...

  10. python相关参考文献_python机器学习理论与实战(六)支持向量机

    上节基本完成了SVM的理论推倒,寻找最大化间隔的目标最终转换成求解拉格朗日乘子变量alpha的求解问题,求出了alpha即可求解出SVM的权重W,有了权重也就有了最大间隔距离,但是其实上节我们有个假设 ...

最新文章

  1. 3、Excel各种类型数据的输入(数据类型、快速填充数据、修改数据)
  2. 短信猫编程的一些资料1(At指令发送短信)
  3. $(选择器).html,选择器.html
  4. 如何自行查找SAP ERP的物料主数据和CRM产品主数据的映射关系
  5. 2019世界大学排名全新出炉!清华北大排名大幅下滑?
  6. 在用v-for时又想用v-if进行判断是否生产内容
  7. php批量新增数据类型,Yii框架批量插入数据扩展类的简单实现方法
  8. 巧用SQL的全局临时表防止用户重复登录
  9. 2017省夏令营Day6
  10. 第九期 HG255d硬件分析 《路由器就是开发板》
  11. Python+SSM懂车帝汽车数据分析平台 爬虫代码实例分析
  12. JAVA调用WebService的三种方法
  13. 决策边界(decision boundary)的理解
  14. H3C设备网吧万兆光模块解决方案
  15. 如何通过优化物流体验的技术来提高客单价?
  16. HTML5 新的 Input 类型
  17. 箱体图Boxplot及Python绘制方法
  18. Android开发——用户在屏幕上的手势识别
  19. 志翔科技亮相2022数博会 工业大数据技术支撑电力数智化
  20. 大数据工程师如何实现技术成长?

热门文章

  1. Linux基础篇·DNS
  2. 思绪尘埃梦婉花舞,心事微风彩蝶翩跹
  3. iOS区分不同版本URL schema
  4. 客户端/服务端软件概述
  5. 菲尼克斯Proficloud 在中国深度落地
  6. 解决qq显示国外ip的方法
  7. Paint.getTextBounds
  8. 黄色或微黄色油状物DBCO-PEG5-Acid,DBCO-PEG5-COOH,Azadibenzocyclooctyne-PEG5-acid的化学性质
  9. Linux系统中-文件名中含汉字,显示乱码
  10. 申宝剖析沪深两市股指高开高走