python多线程图片处理

有时候我们需要对图片进行如加噪、放缩等变换，当数据集比较大时，遍历整个数据集所用时间太长，为此可以写一点多线程处理的代码，下面以压缩为例子：

# author: Wu
# 2022/1/24
# This script is used to jpeg compressimport os
import cv2
import numpy as np
from threading import Threadinput_folder = '/data0/wjh/coco/val2017'
output_jpg50_folder = '/data0/wjh/coco/val2017-jpg50'
output_jpg70_folder = '/data0/wjh/coco/val2017-jpg70'
num_threads = 5def jpg_compress(filelist):for file in filelist:img = cv2.imread(os.path.join(input_folder, file))new_jpg50name = os.path.join(output_jpg50_folder, file.split('.')[0]+'.jpg')new_jpg70name = os.path.join(output_jpg70_folder, file.split('.')[0]+'.jpg')cv2.imwrite(new_jpg50name, img, [int(cv2.IMWRITE_JPEG_QUALITY), 50])cv2.imwrite(new_jpg70name, img, [int(cv2.IMWRITE_JPEG_QUALITY), 70])def multi_thread_process():if num_threads == 1:jpg_compress(os.listdir(input_folder))returnfilelist_total = os.listdir(input_folder)filenum = len(filelist_total)filenum_each_thread = int(filenum/num_threads)thread_list = []for i in range(num_threads-1):thread_list.append(Thread(target=jpg_compress, args=(filelist_total[i*filenum_each_thread : (i+1)*filenum_each_thread],)))thread_list.append(Thread(target=jpg_compress, args=(filelist_total[(num_threads-1)*filenum_each_thread :],)))for th in thread_list:th.start()for th in thread_list:th.join()multi_thread_process()

当图像处理的需求产生变化时，只需要修改jpg_compress函数即可

python多线程图片处理相关推荐

2021-03-10 Python多线程爬虫快速批量下载图片
Python多线程爬虫快速批量下载图片 1.完成这个需要导入的模块 urllib,random,queue(队列),threading,time,os,json 第三方模块的安装键盘win+R,输入 ...
Python多线程下载网络URL图片的方法
Python多线程下载网络URL图片的方法采用多线程的方法,通过URL地址,下载资源图片 GitHub地址:https://github.com/PanJinquan/python-learning ...
python多线程下载小姐姐图片
python多线程下载小姐姐图片闲谈思路实现过程单线程实现代码功能问题描述多线程处理办法完成效果闲谈今日闲来无事,翻看博客,看到一篇关于python自动下载图片的文章,就萌生了也写一 ...
Python 多线程下载图片
多线程下载图片参考链接: Python标准库-urllib和urllib3 urllib实战2–urllib基础urlretrieve().urlcleanup().info().getcode() ...
python爬图片_网络爬虫经验：反爬和反反爬
我想很多人入门python是图片爬虫,就是HTTP请求,保存一下图片,用python实现非常快.网上很多爬虫的教程就讲到这里,实际上很单一,看了跟没看没什么区别,都是找一下网页的规律,然后Beauti ...
python多线程爬虫实例-Python实现多线程爬虫
编辑推荐: 本文主要介绍对Python多线程爬虫实战的整体的思路,希望对大家有帮助. 本文来知乎,由火龙果软件Alice编辑,推荐. 最近在写爬虫程序爬取亚马逊上的评论信息,因此也自学了很多爬虫相关的 ...
python多线程爬虫实例-Python多线程爬虫简单示例
python是支持多线程的,主要是通过thread和threading这两个模块来实现的.thread模块是比较底层的模块,threading模块是对thread做了一些包装的,可以更加方便的使用. ...
Tensorflow yolov3 Intel Realsense D435 双摄像头下测试python多线程（假的多线程）self.predict()函数运行时间（191204）
测试代码: # -*- coding: utf-8 -*- """ @File : test-191204-两个摄像头调用多线程识别.py @Time : 2019/12 ...
python多线程执行_python多线程实现同时执行两个while循环
如果想同时执行两个while True循环,可以使用多线程threading来实现. 完整代码 #coding=gbk from time import sleep, ctime import thr ...

python多线程图片处理

python多线程图片处理相关推荐

最新文章

热门文章