python 线程池 map_python 线程池 map_python ThreadPoolExecutor线程池使用-阿里云开发者社区...

python有好几种实现线程池的方式，

注意选择一下，哪种是自己需要的。

最近用上ThreadPoolExecutor，

用来代替celery的方式。

主要是用在celery上的时间太少，

没有吃透，

还有，我们的应用没有复杂到那地步，

多开几个服务器，也可以实现线程池的扩展。

ThreadPoolExecutor主要有submit和map方式。

map就够用我们的场景了。

使用ThreadPoolExecutor时，需要注意的是map函数的参数是如何构造的。

(就是将cmd_run后面的参数，构造为有相同于进程池数量的参数列表！！！)

【就是参数个人为cmd_run要求的个数，但列表内的长度为进程池数量，利用率刚好】

data为每个函数的返回值。

注意，进程的退出，不到山穷水尽，不要用os.exit()这样的函数，

python可能无法正常完成数据操作及资源回收。

最好是利用函数的返回值自然退出线程，高端些~

from concurrent.futures import ThreadPoolExecutor

executor = ThreadPoolExecutor(max_workers=xxx)

for data in executor.map(cmd_run, subserver, [deploy_type] * sub_len, [cmd] * sub_len,

[current_user_set] * sub_len, [percent_value] * sub_len,

[app_name] * sub_len, [deployversion_id] * sub_len, [auto_deploy_id] * sub_len):

mylog.debug("cmd %s result is: " % cmd + str(data))

if not data:

return False

python 线程池 map_python 线程池 map_python ThreadPoolExecutor线程池使用-阿里云开发者社区...相关推荐

python与材料计算公式_《从问题到程序：用Python学编程和计算》——2.11　补充材料-阿里云开发者社区...
本节书摘来自华章计算机<从问题到程序:用Python学编程和计算>一书中的第2章,第2.11节,作者裘宗燕,更多章节内容可以访问云栖社区"华章计算机"公众号查看. 2 ...
python与人工智能应用锁_linux应用锁的搜索结果-阿里云开发者社区
Linux中的spinlock和mutex Linux中的spinlock和mutex 作者 digoal 日期 2016-11-09 标签 PostgreSQL , Linux , spin loc ...
python函数几个return语句_Python常用函数--return 语句-阿里云开发者社区
在Python教程中return 语句是函数中常用的一个语句. return 语句用于从函数中返回,也就是中断函数.我们也可以选择在中断函数时从函数中返回一个值. 案例(保存为 function_re ...
python中如何输出中文_python中怎么输出中文-问答-阿里云开发者社区-阿里云
方法一: 用encode和decode 如: ? 1 2 3 4 5 6 7 8 9 10 11 import os.path import xlrd,sys Filename='/home/tom/ ...
python怎么打开h5文件_python怎么查看h5文件-问答-阿里云开发者社区-阿里云
h5接受的数据是矩阵跟mat方法一致,但是具有更强的压缩性能使用hdf5依赖于Python的工具包:h5py import h5py #导入工具包 import numpy as np HDF5的写 ...
python 多态app_多态简介 | Python从入门到精通：高阶篇之三十三-阿里云开发者社区...
多态多态是面向对象的三大特征之一. 多态从字面上理解是多种形态.例如:狗有多个种类(狼狗.藏獒.哈士奇.古代牧羊犬...). 一个对象可以以不同的形态去呈现. 我们先来定义两个类: class A: ...
python 做网站知乎_python做网站知乎的搜索结果-阿里云开发者社区
伤不起的全栈程序员前段时间听说一个新名词:"全栈程序员",google了一下,被引导到了知乎的一个讨论上: http://www.zhihu.com/question/22420 ...
python交并补符号_三种方式实现 Python 中的集合的交、并、补运算-阿里云开发者社区...
三种方式实现 Python 中的集合的交.并.补运算一背景集合这个概念在我们高中阶段就有所了解,毕业已多年,我们一起回顾一下几个集合相关的基本概念吧? 集合是指具有某种特定性质的具体的或抽象的对 ...
如何用python抓取qq音乐_手把手教你使用Python抓取QQ音乐数据（第三弹）-阿里云开发者社区...
[一.项目目标] 通过手把手教你使用Python抓取QQ音乐数据(第一弹)我们实现了获取 QQ 音乐指定歌手单曲排行指定页数的歌曲的歌名.专辑名.播放链接. 通过手把手教你使用Python抓取QQ音乐 ...
python合法标识符 40xl_Python基础测验（答案篇）-问答-阿里云开发者社区-阿里云
一.填空题 Python使用符号 # 标示单行注释:以缩进对齐划分语句块. Python序列类型包括字符串 . 列表 . 元组三种: _字典_是Python中唯一的映射类型. Python序列 ...

python 线程池 map_python 线程池 map_python ThreadPoolExecutor线程池使用-阿里云开发者社区...

python 线程池 map_python 线程池 map_python ThreadPoolExecutor线程池使用-阿里云开发者社区...相关推荐

最新文章

热门文章