(一)人工智能、AI批量抠图、AI视频抠像、图片换背景、视频换背景、实时抠图、实时抠像、虚拟场景直播系统、虚拟旅游、人像去背景、图像去背景、视频背景消除
2020年是个不平凡的一年,在家抗疫的日子里,利用业余时间,编写了很多人工智能、AI批量抠图、视频抠像、图片换背景、视频换背景、实时抠图、实时抠像的代码,主要给虚拟场景直播系统使用,用户界面完整,已经稳定运行了大半年。在此分享出来,与广大爱好者共同学习提高。
一、图片批量抠图软件:
此软件主要功能是:
1、对人像图片进行抠图,可以存成PNG格式的透明图片,也可选择替换背景(可选择替换成纯色的、也可选替换成指定背景图片);
2、可以批量抠图,在选择文件的对话框里可以选择多个文件,同时抠图、批量操作;
3、软件设置里可以设置使用GPU处理还是CPU处理,软件只支持英伟达()的GTX/RTX系列的GPU;
4、抠图算法的模型有复杂模型和简易模型,可以根据原始图片的背景复杂度随意选择。
二、视频去背景软件
此软件主要功能是:
1、对包含人像的视频进行抠像,并替换背景(可以替换成纯色的、也可以替换成指定背景图片);
2、可以批量处理,在选择文件的对话框里可以选择多个文件,同时抠像换背景、批量操作;
3、软件设置里可以设置使用GPU处理还是CPU处理,软件只支持英伟达()的GTX/RTX系列的GPU;
4、抠图算法的模型有复杂模型和简易模型,可以根据原始图片的背景复杂度随意选择;
5、信息统计里面可以实时显示处理的各种统计信息;
6、视频处理完毕后自动进行音频的处理与合成。
三、虚拟旅游
此软件主要功能是:
1、对电脑摄像头进行抠像,并替换背景(可以替换成纯色的、也可以替换成指定背景图片);
2、疫情当前,坐在家里就可以进行虚拟旅游,只需将背景换成自己喜欢的景点、风景照片即可;比用PS批图简单很多,还可以摆各种Pose;
3、软件设置里可以设置使用GPU处理还是CPU处理,软件只支持英伟达()的GTX/RTX系列的GPU;
4、抠图算法的模型有复杂模型和简易模型,可以根据原始图片的背景复杂度随意选择;
四、实时抠像软件
上面介绍的【视频去背景软件】是直接处理的视频,不是实时的。在帮助进行【iCANX全球科学家论坛】直播时需要使用ZOOM会议等视频会议软件与远端的演讲嘉宾连线,嘉宾传过来的头像的背景一般十分杂乱,在直播软件里与PPT、舞台背景合成后非常难看,需要对会议软件传来的视频进行实时抠像,换成绿色背景然后在直播软件里加滤镜去除背景,再与直播软件合成,推流直播出去。
此软件主要功能是:
1、首先选择包含人像的视频窗口(Zoom会议等);
2、用鼠标对选择的窗口里的人像进行抓取,抓取范围内的视频就被实时替换成绿色的背景了;
3、软件设置里可以设置使用GPU处理还是CPU处理,软件只支持英伟达()的GTX/RTX系列的GPU;
4、抠图算法的模型有复杂模型和简易模型,可以根据原始图片的背景复杂度随意选择;
5、只处理视频,不进行音频的处理,音频直接采集Zoom音频即可。
五、多人像实时抠像软件
很多时候视频会议是多个人同时演讲、或者进行多人的嘉宾对话场景,需要实时处理多个人像的抠像换背景。于是将窗口扩展成了6个,每个窗口都可以抓取1个人像,可以同时实时抠像。
此软件主要功能是:
1、多人像抓取,实时抠像换背景,实现多人像合成的虚拟画面;
2、多图像同时抠像,由于处理量较大,如果用CPU,只能处理不到10帧,建议使用GPU处理,可以达到20帧/秒以上;
3、软件设置里可以设置使用GPU处理还是CPU处理,软件只支持英伟达()的GTX/RTX系列的GPU;
4、抠图算法的模型有复杂模型和简易模型,可以根据原始图片的背景复杂度随意选择;
5、只处理视频,不进行音频的处理,音频直接采集Zoom音频即可。
六、实时人脸替换软件
视频会议里,嘉宾一般使用电脑摄像头,传来的人像基本都是半身的,在人像下面加个小讲台以模拟现实场景。如果能把传来的半身人像变成全身人像,就可以站到舞台上演讲了。于是就开发了这个软件。
此软件主要功能是:
1、抓取需要换脸的视频,自动实时抠像换绿背景;
2、选择事先录制好的人体站立演讲的视频(此视频要事先换成绿色背景),点击【开始换脸】即可;
3、对头部的位置、大小、脖子的长短可以调节;
3、软件设置里可以设置使用GPU处理还是CPU处理,软件只支持英伟达()的GTX/RTX系列的GPU;
4、抠图算法的模型有复杂模型和简易模型,可以根据原始图片的背景复杂度随意选择;
5、只处理视频,不进行音频的处理,音频直接采集Zoom音频即可。
七、实时对口型
如果演讲嘉宾只有声音,没有传来图像,是否可以拿1张嘉宾的静态图片,结合声音使静态图片动起来,脸部、表情、口型都根据演讲者的声音而动。利用AI技术是可以实现的。
注:此软件正在开发、尚未完成…
以上软件都是使用编的,在配置好的环境下才能稳定运行。有关环境配置、软件代码说明、源码公开将在后续的博文中陆续发布,敬请期待!对此文感兴趣的可以加wx深入探讨: