前言

最近在尝试 Python Web方面的开发尝试,框架使用的是Django,但是在读取数据库并页面展示的时候,出现了中文编码的问题。

问题

我们看下面一段代码,获取小说章节列表:def main(request):

sql = "SELECT id,title FROM novel LIMIT 10;"

result = mysql.getAll(sql)

context = {'novel_list': result}

return render(request, 'novel_list.html', context)

页面输出:{% for novel in novel_list %}

{{ novel.title }}

{% endfor %}

如果不加任何转换,页面上显示的中文将会是字节码。

解决

这里我们举一个稍微简单的例子,dict是数据库中查询出来的数据:import json

dict = {'id': 1, 'title': b'\xe7\xac\xac\xe4\xb8\x80\xe7\xab\xa0 \xe7\xa7\xa6\xe7\xbe\xbd'}

dup = json.dumps(dict ,ensure_ascii=False)

print(dup)

Python2执行输出:{"id": 1, "title": "第一章 秦羽"}

Python3执行报错:TypeError: Object of type bytes is not JSON serializable

查询了半天,最终解决方案:

安装模块:pip3 install numpy

最终代码:import json

import numpy as np

class MyEncoder(json.JSONEncoder):

def default(self, obj):

if isinstance(obj, np.ndarray):

return obj.tolist()

elif isinstance(obj, bytes):

return str(obj, encoding='utf-8');

return json.JSONEncoder.default(self, obj)

dict = {'id': 1, 'title': b'\xe7\xac\xac\xe4\xb8\x80\xe7\xab\xa0 \xe7\xa7\xa6\xe7\xbe\xbd'}

dup = json.dumps(dict , cls=MyEncoder, ensure_ascii=False, indent=4)

print(dup)

你也可以for循环,然后单个转码:sql = "SELECT id,title FROM novel LIMIT 10;"

result = mysql.getAll(sql)

for each in result:

ach['title'] = each['title'].decode('utf-8')

字符串通过编码转换为字节码,字节码通过解码转换为字符串:str--->(encode)--->bytes,bytes--->(decode)--->str

decode和encode详解decode 解码,在已知字符串编码的情况下,转码为unicode ,比如 s.decode('utf-8'),结果为unicode

encode 编码,在已有unicode的情况下,转码为其它编码,比如 u.encode('utf-8'),结果为utf-8

Web输出

JSON (JavaScript Object Notation) 是一种轻量级的数据交换格式。它基于ECMAScript的一个子集。

Python3 中可以使用 json 模块来对 JSON 数据进行编解码,它包含了两个函数:json.dumps(): 对数据进行编码。

json.loads(): 对数据进行解码。def main(request):

sql = "SELECT id,title FROM novel LIMIT 10;"

result = mysql.getAll(sql)

# 转Json对象

result = json.dumps(result, cls=MyEncoder, ensure_ascii=False, indent=4)

# 转字典类型

result = json.loads(result)

context = {'novel_list': result}

return render(request, 'novel_list.html', context)

参数详解json.dumps(result, cls=MyEncoder, ensure_ascii=False, indent=4)

indent

根据数据格式缩进显示,读起来更加清晰,indent的数值,代表缩进的位数。

ensure_ascii

如果无任何配置,或者说使用默认配置, 输出的会是中文的ASCII字符吗,而不是真正的中文。 这是因为json.dumps 序列化时对中文默认使用的ascii编码。{

"id": 1,

"title": "\u7b2c\u4e00\u7ae0 \u79e6\u7fbd"

}

cls

dict类型的数据(存在中文),在python2中是可以转化的,但是在python3中存在序列化问题:TypeError: Object of type bytes is not JSON serializable

小结

在Web开发中,这个问题真的很讨厌,中文编码来回转换,限于目前水平,只能这么解决,后续更新更优的方案。

更新

2019年2月13日晚,无意中又浏览到这篇文章,其实最终解决了问题,是自己把自己绕了一个大坑。由于系统读取数据用的是 PooledDB 数据库连接池,我们只需要把参数 use_unicode 设置为 False 使用系统编码即可。

学习案例

从零学Python,各种开发案例,不定期更新:

python3.7怎么设置中文_Python3.7中文字符编码问题相关推荐

  1. python3 中的Json序列化、反序列化 和 字符编码的问题解决

    python3 中的Json序列化.反序列化 和 字符编码的问题解决 参考文章: (1)python3 中的Json序列化.反序列化 和 字符编码的问题解决 (2)https://www.cnblog ...

  2. 中文汉字的正则字符编码范围

    中文编码范围,中文汉字的正则也许用的着. 双字节字符编码范围: 1. GBK (GB2312/GB18030) \x00-\xff GBK双字节编码范围 \x20-\x7f ASCII \xa1-\x ...

  3. python编码转换中文_python3如何中文转换编码?

    相信平时各位小伙伴都是习惯用中文的人,就算英文水平不错,毕竟还是中文用起来更顺手一点.不过在计算机编程中,还是以英文为主,会给我们的实际操作带来一些困扰.有时候中文也不能被计算机语言所识别,就会导致报 ...

  4. python unicode转中文_python3中Unicode字符转中文

    python3中将Unicode字符串转成中文 用python爬虫爬取数据时,有时候会发现爬取的数据类似于 "\u3010\u6f14\u5531\u4f1a\u30112000-\u62c ...

  5. qt中文转字节_QT字符编码转换,可用于中文内码传输

    串口.TCP.UDP传输中文字符时,先将字符串转内码.客户端接收到数据后,将内码转为字符串就OK了 QByteArray CommonFunction::strToInterCode(constQSt ...

  6. java中文乱码decode_Java中文乱码解决

    Jvm内部编码采用的是Unicode编码. 常见的字符编码集:ASCII编码,GBK编码,Unicode编码 UTF-8只是unicode的实现方式之一: UTF-8最大的一个特点,就是它是一种变长的 ...

  7. 记一次RedHat中文乱码,中文语言包安装实践

    上网搜索Linux中文乱码问题,提示需要安装 fonts-chinese-3.02-12.el5.noarch.rpm fonts-ISO8859-2-75dpi-1.0-17.1.noarch.rp ...

  8. 设置MySQL的字符编码

    前言 这里我已经将MySQL的数据库编码设置为UTF-8,所以下面现实的都是UTF-8. 设置MySQL数据库的编码方式有三种,分别是基于session会话的.基于全局gloable的.永久性改变的. ...

  9. mysql 编码格式_设置MySQL的字符编码

    前言 这里我已经将MySQL的数据库编码设置为UTF-8,所以下面现实的都是UTF-8. 设置MySQL数据库的编码方式有三种,分别是基于session会话的.基于全局gloable的.永久性改变的. ...

最新文章

  1. 使用迁移学习不断的自我纠正神经网络
  2. ModifyStyle函数的用法
  3. 玩转百度地图(二)之画圆,高德地图、搜搜地图、搜狗地图等稍微修改即可...
  4. 详细介绍Python中的“魔术方法“__XXX___; 概述__str__()方法;__new__()方法; 三. __ new__ 和__init__的区别
  5. Android和IOS打开文档
  6. Flutter SwitchListTile 开关组件使用详情
  7. python商家入口_购物车--用户和商户入口
  8. leetcode955. Delete Columns to Make Sorted II
  9. 冲刺阶段站立会议每天任务1
  10. php 连接 sybase,thinkphp连接sybase数据库
  11. 自动更新纯真IP数据库
  12. 如何在线免费caj转word
  13. 升级LTS长期支持版|奇点云数据云平台发布DataSimba R3.8
  14. Latex 多图片排版--排版代码生成器
  15. A股市场统计(营业收入增长率、净利润增长率及净利润比市值近十年的平均数、中位数)
  16. 人工智能之知识图谱体系总结
  17. 简单双拼入门,一看就会,看完就用.
  18. LocalDateTime 的用法
  19. 统计代码行数工具(升级版)
  20. 【开发日志-已归档】2021-11

热门文章

  1. java switch嵌套if_(新手)Java课程作业,请各位老哥指教:综合运用嵌套if选择结构、switch选择结构、多重if选择结构实现商品换购功能...
  2. 页描述符 linux,有关Crontab导致Linux文件描述符...-探讨:crond 引发大量sendmail进...-linux下的ulimit命令用法解析(图文)_169IT.COM...
  3. 【LeetCode】【HOT】3. 无重复字符的最长子串(哈希表)
  4. Paw —— 比Postman更舒服的API利器
  5. 动态页面技术(EL/JSTL)
  6. 微信小程序-page
  7. matplotlib 可视化 —— style sheets
  8. 上班第一天,Myeclipse 2014上SVN部署以及maven 配置
  9. IDL读取TXT文件并写入二维数组中【转】
  10. ListDataView:让你的List可以被任何Site引用