一、前言

前几天写了个实现特效的博客,感觉有点差强人意,只是简简单单的换背景应用场景不是非常多,今天就来实现一个更加复杂的特效“影分身”。下面有请我们本场的主演,坤制作人为我们表演他拿手的鸡你太美。

关于实现原理,和上一篇没有本质区别,同样是逐帧处理,但是这里还是详细说一下。
光理论是不够的,在此送大家一套2020最新Python全栈项目视频教程,点击此处 进来获取 跟着练习下,希望大家一起进步哦!

二、实现原理

首先我们要准备一个视频,作为我们的素材。然后我们要逐帧提取视频中的图像,接下来我们利用paddlehub逐帧抠取人像。这样就有了我们的主体,和分身了。最后我们需要在写入视频的时候对图像进行处理,我直接在原图像上粘贴了两个人物分身,最后合成的视频效果就是上面的效果了。当然我们还需要添加音频,所以最后我们需要读取音频并将新视频同音频混流。我们将整个过程分为以下几个步骤:

  1. 逐帧提取图像
  2. 批量抠图
  3. 合成图像(影分身)
  4. 写入视频
  5. 读取音频
  6. 混流

最终我们就能实现一个完整的视频了。

三、模块安装

为了方便,我们全都使用pip安装:

pip install pillow
pip install opencv-python
pip install moviepy
# 安装paddlepaddle
python -m pip install paddlepaddle -i https://mirror.baidu.com/pypi/simple
# 安装paddlehub
pip install -i https://mirror.baidu.com/pypi/simple paddlehub

也就不废话了,如果安装过程中出了什么问题可以自行百度或者联系博主,我会尽量解答的,毕竟我也只是个菜鸡。

四、代码实现

我们先看看导入的一些模块:

import cv2
import math
import numpy as np
from PIL import Image
import paddlehub as hub
from moviepy.editor import *

我们按照上面的步骤,一步一步来。

4.1、逐帧提取图像

这就需要使用到我们的opencv了,具体代码如下:

def getFrame(video_name, save_path):"""传入视频名称,将图像帧保存到save_path下"""# 读取视频video = cv2.VideoCapture(video_name)# 获取视频帧率fps = video.get(cv2.CAP_PROP_FPS)# 获取画面大小width = int(video.get(cv2.CAP_PROP_FRAME_WIDTH))height = int(video.get(cv2.CAP_PROP_FRAME_HEIGHT))size = (width, height)# 获取帧数frame_num = str(video.get(7))name = int(math.pow(10, len(frame_num)))ret, frame = video.read()while ret:cv2.imwrite(save_path + str(name) + '.jpg', frame)ret, frame = video.read()name += 1video.release()return fps, size

这里我们只需要注意OpenCV版本需要在3.0以上,如果是低版本的话会出现兼容问题。

4.2、批量抠图

批量抠图需要使用到我们的paddhub模型库,而抠图的实现也只需要几行代码:

def getHumanseg(frames):"""对frames路径下所以图片进行抠图"""# 加载模型库humanseg = hub.Module(name='deeplabv3p_xception65_humanseg')# 遍历路径下文件files = [frames + i for i in os.listdir(frames)]# 抠图humanseg.segmentation(data={'image': files})

我们调用该方法后会在目录下生成humanseg_output目录,抠好的图像就在里面。

4.3、合成图像(影分身)

这里需要使用到我们的Pillow模块,该模块中提供了图像粘贴的函数:

def setImageBg(humanseg, bg_im):"""将抠好的图和背景图片合并:param humanseg::param bg_im::return:"""# 读取透明图片im = Image.open(humanseg)# 分离色道r, g, b, a = im.split()# 在图片右边粘贴一个人物分身bg_im.paste(im, (bg_im.size[0]//3, 0), mask=a)# 在图片左边粘贴一个人物分身bg_im.paste(im, (-bg_im.size[0]//3, 0), mask=a)# 将图形转换成opencv能正常读取的类型,并返回return np.array(bg_im.convert('RGB'))[:, :, ::-1]

上面主要就是使用paste函数。

4.4、写入视频

写入视频的操作同样是OpenCV来实现的:

def writeVideo(humanseg_path, frames, fps, size):"""传入抠好的人像,和原图像,以及原视频帧率,大小,写入新视频"""# 写入视频fourcc = cv2.VideoWriter_fourcc(*'mp4v')out = cv2.VideoWriter('green.mp4', fourcc, fps, size)# 将每一帧设置背景humanseg = [humanseg_path + i for i in os.listdir(humanseg_path)]frames = [frames + i for i in os.listdir(frames)]for i in range(humanseg.__len__()):# 读取原图像bg_im = Image.open(frames[i])# 设置分身im_array = setImageBg(humanseg[i], bg_im)# 写入视频out.write(im_array)out.release()

到这里我们就实现了一个视频,但是现在还没有声音,接下来就需要我们用moviepy进行音频的混流了。

4.5、混流

我们混流的操作就是先获取音频,然后再混流,而音频我们只需要读取原视频的音频即可:

def getMusic(video_name):"""获取指定视频的音频"""# 读取视频文件video = VideoFileClip(video_name)# 返回音频return video.audio

其中VideoFileClip是moviepy中的一个视频处理的类。下面我们来添加音乐:

def addMusic(video_name, audio):"""实现混流,给video_name添加音频"""# 读取视频video = VideoFileClip(video_name)# 设置视频的音频video = video.set_audio(audio)# 保存新的视频文件video.write_videofile(output_video)

output_video是我们自己定义的一个存放文件保存路径的变量,需要注意,该全路径(路径+名称)不能和原视频相同。

4.6、实现特效

也就是将整个流程整合到一起:

def changeVideoScene(video_name):""":param video_name: 视频的文件:param bgname: 背景图片:return:"""# 读取视频中每一帧画面fps, size = getFrame(video_name, frames)# 批量抠图getHumanseg(frames)# 将画面一帧帧写入视频writeVideo(humanseg_path, frames, fps, size)# 混流addMusic('green.mp4', getMusic(video_name))

在上面有些变量我们还没有定义,我们在main函数中定义一下:

if __name__ == '__main__':# 当前项目根目录BASE_DIR = os.path.abspath(os.path.join(os.path.dirname(__file__), "."))# 每一帧画面保存的地址frames = BASE_DIR + '\\frames\\'# 抠好的图片位置humanseg_path = BASE_DIR + '\\humanseg_output\\'# 最终视频的保存路径output_video = BASE_DIR + '\\result.mp4'# 创建文件夹if not os.path.exists(frames):os.makedirs(frames)if not os.path.exists(background_path):os.makedirs(background_path)# 给视频添加特效changeVideoScene('jntm.mp4')

最后送大家一套2020最新Pyhon项目实战视频教程,点击此处 进来获取 跟着练习下,希望大家一起进步哦!
这样就实现了我们完整的特效。感兴趣的读者可以参照相关博客https://blog.csdn.net/ZackSock/article/details/105558172,另外大家可以关注我的个人公众号:ZackSock。

Python实现高级电影特效,CXK也能影分身相关推荐

  1. python 制作影视动画、电影特效工具

    一直觉得电影特效,动画制作这些都很什么,在google上搜索了下python开发电影特效的内容,发现了几个不错的软件,都支持python脚本开发. Houdini  Houdini (电影特效魔术师) ...

  2. mac做电影特效用什么软件?NUKE 11 for mac版11.3v4激活版最火的特效软件

    mac做电影特效用什么软件?下面小编分享最火的特效软件NUKE 11 for mac版11.3v4激活版给需要的朋友,NUKE具有先进的将最终视觉效果与电影电视的其余部分无缝结合的能力,无论所需应用的 ...

  3. 世界著名电影特效公司

    工业光魔 Industrial Light and Magic   创 始 人:乔什·卢卡斯  创立时间:1981  核心技术:CGI动画技术,模型拍摄,全数字高清晰设想技术:凭<星球大战> ...

  4. The Foundry NUKE 12 mac版(电影特效合成制作软件)

    The Foundry NUKE 12 mac版是电影特效合成制作软件,NUKE能为艺术家提供组合和操作扫描的照片,视频板以及计算机生成的图像的灵活.有效.节约和全功能的工具. NUKE 12 Mac ...

  5. 可操作性强!Python实现一个电影订票系统!

    来源丨Python小二 一.效果展示 通过Python实现一个电影订票系统,效果如下所示: 二.整体结构图 三.代码分解 3.1 infos.py 一部电影的详细信息适合用 字典 结构来存储,我们可以 ...

  6. python flask高级编程之restful_('Python Flask高级编程之RESTFul API前后端分离精讲',),全套视频教程学习资料通过百度云网盘下载...

    资源详情 r n t某课网好评度100%的Python Flask高级编程之RESTFul API前后端分离精讲 r n t t t第1章 随便聊聊 r n t t t聊聊Flask与Django,聊 ...

  7. 陈启峰:人工智能生成图像技术,未来或能取代电影特效

    2019年1月21日,<麻省理工科技评论>公布了2018年"35岁以下创新35人"(Innovators Under 35 China)中国区榜单.从榜单中,我们看到更 ...

  8. (转)python requests 高级用法 -- 包括SSL 证书错误的解决方案

    (转)python requests 高级用法 -- 包括SSL 证书错误的解决方案 参考文章: (1)(转)python requests 高级用法 -- 包括SSL 证书错误的解决方案 (2)ht ...

  9. python的高级函数_Python的高级函数

    Python的高级函数 1. map函数 map(func, *itertables) 对itertables中的每个元素使用func,当最短的itertable结束时便停止.map可以传入多个ite ...

  10. python的高级特性:切片,迭代,列表生成式,生成器,迭代器

    python的高级特性:切片,迭代,列表生成式,生成器,迭代器 1 #演示切片 2 k="abcdefghijklmnopqrstuvwxyz" 3 #取前5个元素 4 k[0:5 ...

最新文章

  1. log_softmax与softmax区别
  2. 字符串与整数之间进行转换
  3. Linux 基本网络配置 实验手册
  4. php找不到指定的模块,php中的dll“无法找到指定的模块”
  5. oracle之报错:ORA-00054: 资源正忙,要求指定 NOWAIT
  6. AttributeError系列之:AttributeError: 'tuple' object has no attribute 'shape'
  7. PWN-PRACTICE-BUUCTF-1
  8. Opencv undefined reference to `cv::imread() Ubuntu编译
  9. vscode中文支持xp_VSCode (Visual Studio Code) V1.43.0下载并设置成中文语言的方法
  10. openwrt系统的无线WiFi配置文件
  11. python计算工资编程-Python实现扣除个人税后的工资计算器示例
  12. 概要设计说明书任务分配
  13. python写扫雷脚本_利用Python实现自动扫雷小脚本
  14. 探讨OSPF次优路由选择
  15. java商城源码(servlet,springboot,html,vue,uniapp,小程序,android)一套任意组合
  16. 一纵一横,搭建完整数据分析体系
  17. 2017cad光标大小怎么调_怎么设置CAD中十字光标的长度
  18. OBD系统系族分类规则
  19. DEBUG指示灯详细说明
  20. 笔记01-如何创建一个vue3的项目

热门文章

  1. layui搭建后台管理页
  2. Excel数据分析从入门到精通(十一)28个图表之结构分析
  3. 桌面快捷方式图标不能删除的原因以及处理方法
  4. 计算机一级选择题答题技巧,计算机一级考试模拟题内容 答题技巧
  5. 标明文献引用及文献列表自动生成(尾注交叉引用)
  6. 深度学习之跟学霹雳吧啦Wz笔记
  7. 使用Excel 2007绘制甘特图
  8. Mysql基础命令语句(1)
  9. Python(数据类型思维导图)
  10. 怎样将tiff格式转成jpg或png?