[Windows] AI一键『视频插帧』工具（Interpolation tool by CS）

程序员没有节日 · 发表于 2022-5-10 20:44:40

AI**插帧附带『**插帧』工具**插帧工具来啦！
下载链接在最下面。
前言

继**抠图工具以来，本人又考虑制作一款**插帧的工具，最近一直在改各种问题（头都大了- -），还好该来的终于来了(^ ^)。现在自媒体越来越流行，很多人都开始自己做个小**玩玩，各大**平台也都**了高刷**功能。这次的灵感也就来源于之前搜了一搜目前**插帧的工具和方法，要么下载各种乱七八糟的软件，要么就是折腾好一阵效果还是差强人意，总之很麻烦还浪费时间。于是还是想弄个几键就开始处理的，不需要配置太多就能用的工具。

所以，我就搜集了一下目前插帧常用的方法，基本都是基于光流法，网上一搜基本都是用SVP4的**渲染软件，把**提到60帧，但是这个下载和配置太麻烦了，而且仅仅也就60帧，再想提高就得掏money了。
之前看过一篇《Super SloMo: High Quality Esti**tion of Multiple Intermediate Fr**es for Video Interpolation》**。于是想在其基础上优化一下，弄个轻量一点的模型。奈何效果还是有限，电脑跑了好久模型，处理速度还是太慢了。由于本人电脑用的nvidia显卡cuda加速，可能目前还有大部分电脑只能用cpu处理，所以速度太慢了。如果有人仅需处理一小段**的话，可以下载用一用。
提示：工具缺点就是处理速度较慢，还有一些功能后续再完善。
<html ><hr> </html>
一、**插帧效果最终实现：帧数翻倍。
效果：在每帧图片较为清晰的情况下，效果还是可以的。但是是在图像较为模糊、两段**转场时，效果还是差强人意。
1.效果运动一般较为模糊，也是受影响较大的部分，由于原始**帧就比较模糊，所以仅仅是提升了高刷新率的模糊帧，但是观感还是更舒服了一点，如果原始**质量高的话，效果就会更好。

总结：相较于其他方法，使用较为简便，但是由于每个人电脑配置不同，移植到不同设备上可能会有不同的bug，如果能用GPU加速的就用，如果不能用GPU的，我就不太建议**插帧了，因为处理速度太慢了。目前**插帧的普遍问题就是处理速度，这个受硬件**太大了。但是你电脑不支持GPU加速也想尝试一下的话，我也加入了取消勾选GPU的按键，利用cpu来处理，但仅供娱乐了。
<html ><hr> </html>

二、采用的方法

作者原代码同样为pytorch环境上训练的类Unet结构模型。根据生成的双向光流与伪标签构建的无监督模型，这里供上人家的[文章]。对于这个模型，本人对其进行轻量化改进，引入MobileNet的可分离卷积，使得处理速度与模型大小稍有改进，但还是有限。
训练所使用的数据集使用了adobe240fps，对其进行了处理。采用的损失包括了：重建损失（lr）、感知损失（lp）、平滑损失（ls）和wrap损失。对于可用GPU的cuda加速的情况，我对模型数据采用半精度来提升处理速度，模型结构也稍作改变。但还是胳膊拧不过大腿，对于这种图像生成的模型，需要消耗比较多的时间。
由于基于torch框架，其所占空间较大，所以这次的工具占的空间也就较大。
<html ><hr> </html>
三、使用步骤判断GPU是否可用 **代码 隐藏代码
如何判断电脑是否支持GPU cuda加速:1.首先是nvidia品牌，且cuda版本>=10.2，安装好显卡驱动。2.其次可通过按下win+R组合键，打开cmd命令窗口。输入nvidia-smi命令，查看CUDA Version版本。如果CUDA Version<=10.2,尝试更新显卡驱动，看看显卡是否支持更高版本的cuda。直接打开Interpolation tool by CS.exe，选择安装位置进行安装，并生成桌面快捷方式，然后可以直接打开。
1.Data选择

Input Dir：选择所需处理的**；
- Output Dir：选择保存位置文件夹；

2.Advance设置

GPU：选择是否使用GPU。默认勾选，（如果运行时报错，可尝试判断自身显卡是否支持cuda10.2版本以上加速，若支持可尝试更新显卡驱动提升cuda版本；若不支持就取消勾选，采用cpu处理，但是速度非常慢）；
BatchSize：选择批处理大小。一般太大会爆显存或内存，自己尝试找到适合自己电脑的最大值（一般不超过5）；
ScaleRate：帧率提升的倍数。一般30帧**可以选择设置为3倍，提升至90帧（帧数提升倍数越多，处理时间也会跟着翻倍，所以超过120帧就没必要了）；

<center>主界面</center>
3.Start Run

点击Run按钮开始处理，可通过命令行窗口查看当前处理进度（注意处理时不要关闭这个窗口）。
如果不想处理了，可以点击Stop按钮结束处理进程。

最终输出为output(+audio).mp4**。
<html ><hr> </html>
4.错误提示的解决
错误一：

不支持显卡GPU cuda加速。根据上面的方法：判断GPU是否可用，来自行判断。如果不支持GPU，则取消勾选GPU按钮再尝试重新运行。

<center>错误一</center>
错误二：

BatchSize设置太大了，爆显存、内存了，尝试调小。如果调到2还是爆内存，那就是电脑配置不行了。

<center>错误二</center>
错误三：

Input Dir、Output Dir 输入、输出路径没有选择。

<center>错误三</center>
成功运行：

分别显示的是：完成百分比、已运行时间、预计剩余时间。

<center>成功运行</center>
总结工具可从

点击进入百度网盘下载(←购买前请先验证分享链接是否有效)

?pwd=1210获取，提取码：1210
目前bug较多，处理速度和效果有限，硬件依赖大，仅供娱乐。
制作不易，主界面有个小彩蛋，可以打赏一下呦，感激不尽!
如果大家喜欢的话，后面可以考虑再出个增强图片、**分辨率的工具，让你的人像与场景更加清晰！
投稿投累了

此处内容付费可见

此处内容需要向楼主支付铜钱才能显示

支付 9 铜钱

免责申明 - 论坛版权1、本站所有资源均来自会员分享或网络收集整理,仅供会员交流学习，禁用商业用途或盈利,下载后请在24小时之内删除；
2、本站（www.975w.com）支持正版，本资源版权归版权方所有，观看或阅读请到相应机构购买正版资源；
3、本站资源均来源于网络，本站不参与录制、上传，如本帖侵犯到任何版权问题，请立即告知本站(97889527#qq.com(#=@))，本站将及时予与删除并致以最深的歉意；

楼主热贴

		自动登录	找回密码
密码			注册入口

程序员没有节日程序员没有节日当前离线积分 19050 主题 1700 战斗力 18355 美誉度 490 铜钱 7377 注册时间 2022-3-27 最后登录 2024-5-4 在线时间 172 小时发消息	电梯直达楼主发表于 2022-5-10 20:44:40 \| 只看该作者 \|只看大图 \|倒序浏览 \|阅读模式请尊重分享者,本资源仅限交流未经楼主同意严禁转载或盈利,违者封号处理！ AI插帧附带『插帧』工具插帧工具来啦！下载链接在最下面。前言继抠图工具以来，本人又考虑制作一款*插帧的工具，最近一直在改各种问题（头都大了- -），还好该来的终于来了(^* ^)。现在自媒体越来越流行，很多人都开始自己做个小玩玩，各大平台也都了高刷功能。这次的灵感也就来源于之前搜了一搜目前插帧的工具和方法，要么下载各种乱七八糟的软件，要么就是折腾好一阵效果还是差强人意，总之很麻烦还浪费时间。于是还是想弄个几键就开始处理的，不需要配置太多就能用的工具。所以，我就搜集了一下目前插帧常用的方法，基本都是基于光流法，网上一搜基本都是用SVP4的渲染软件，把提到60帧，但是这个下载和配置太麻烦了，而且仅仅也就60帧，再想提高就得掏money了。之前看过一篇《Super SloMo: High Quality Estition of Multiple Intermediate Fres for Video Interpolation》。于是想在其基础上优化一下，弄个轻量一点的模型。奈何效果还是有限，电脑跑了好久模型，处理速度还是太慢了。由于本人电脑用的nvidia显卡cuda加速，可能目前还有大部分电脑只能用cpu处理，所以速度太慢了。如果有人仅需处理一小段的话，可以下载用一用。提示：工具缺点就是处理速度较慢，还有一些功能后续再完善。 <html ><hr> </html> 一、插帧效果最终实现：帧数翻倍。效果：在每帧图片较为清晰的情况下，效果还是可以的。但是是在图像较为模糊、两段转场时，效果还是差强人意。 1.效果运动一般较为模糊，也是受影响较大的部分，由于原始帧就比较模糊，所以仅仅是提升了高刷新率的模糊帧，但是观感还是更舒服了一点，如果原始质量高的话，效果就会更好。 <center><b><font size ='3'>1.1 原始30fps</font></b></center></font> <center><b><font size ='3'>1.2 120fps</font></b></center></font> 总结：相较于其他方法，使用较为简便，但是由于每个人电脑配置不同，移植到不同设备上可能会有不同的bug，如果能用GPU加速的就用，如果不能用GPU的，我就不太建议插帧了，因为处理速度太慢了。目前插帧的普遍问题就是处理速度，这个受硬件太大了。但是你电脑不支持GPU加速也想尝试一下的话，我也加入了取消勾选GPU的按键，利用cpu来处理，但仅供娱乐了。 <html ><hr> </html> 二、采用的方法 125132t5r6p16hn5hffgnp.png (91.74 KB, 下载次数: 0) 下载附件 2022-5-10 20:44 上传作者原代码同样为pytorch环境上训练的类Unet结构模型。根据生成的双向光流与伪标签构建的无监督模型，这里供上人家的[文章]。对于这个模型，本人对其进行轻量化改进，引入MobileNet的可分离卷积，使得处理速度与模型大小稍有改进，但还是有限。训练所使用的数据集使用了adobe240fps，对其进行了处理。采用的损失包括了：重建损失（lr）、感知损失（lp）、平滑损失（ls）和wrap损失。对于可用GPU的cuda加速的情况，我对模型数据采用半精度来提升处理速度，模型结构也稍作改变。但还是胳膊拧不过大腿，对于这种图像生成的模型，需要消耗比较多的时间。由于基于torch框架，其所占空间较大，所以这次的工具占的空间也就较大。 <html ><hr> </html> 三、使用步骤判断GPU是否可用 *代码隐藏代码* 如何判断电脑是否支持GPU cuda加速:1.首先是nvidia品牌，且cuda版本>=10.2，安装好显卡驱动。2.其次可通过按下win+R组合键，打开cmd命令窗口。输入nvidia-smi命令，查看CUDA Version版本。如果CUDA Version<=10.2,尝试更新显卡驱动，看看显卡是否支持更高版本的cuda。直接打开Interpolation tool by CS.exe，选择安装位置进行安装，并生成桌面快捷方式，然后可以直接打开。 1.Data选择 Input Dir：选择所需处理的*； Output Dir：选择保存位置文件夹； 2.Advance设置* GPU：选择是否使用GPU。默认勾选，（如果运行时报错，可尝试判断自身显卡是否支持cuda10.2版本以上加速，若支持可尝试更新显卡驱动提升cuda版本；若不支持就取消勾选，采用cpu处理，但是速度非常慢）； BatchSize：选择批处理大小。一般太大会爆显存或内存，自己尝试找到适合自己电脑的最大值（一般不超过5）； ScaleRate：帧率提升的倍数。一般30帧可以选择设置为3倍，提升至90帧（帧数提升倍数越多，处理时间也会跟着翻倍，所以超过120帧就没必要了）； <center><b><font size ='3'>主界面</font></b></center></font> 3.Start Run** 点击Run按钮开始处理，可通过命令行窗口查看当前处理进度（注意处理时不要关闭这个窗口）。如果不想处理了，可以点击Stop按钮结束处理进程。最终输出为output(+audio).mp4。 <html ><hr> </html> 4.错误提示的解决错误一：不支持显卡GPU cuda加速。根据上面的方法：判断GPU是否可用，来自行判断。如果不支持GPU，则取消勾选GPU按钮再尝试重新运行。 <center><b><font size ='3'>错误一</font></b></center></font> 错误二： BatchSize设置太大了，爆显存、内存了，尝试调小。如果调到2还是爆内存，那就是电脑配置不行了。 <center><b><font size ='3'>错误二</font></b></center></font> 错误三：** Input Dir、Output Dir 输入、输出路径没有选择。 <center><b><font size ='3'>错误三</font></b></center></font> 成功运行：分别显示的是：完成百分比、已运行时间、预计剩余时间。 <center><b><font size ='3'>成功运行</font></b></center></font> 总结工具可从点击进入百度网盘下载(←购买前请先验证分享链接是否有效) ?pwd=1210获取，提取码：1210 目前bug较多，处理速度和效果有限，硬件依赖大，仅供娱乐。制作不易，主界面有个小彩蛋，可以打赏一下呦，感激不尽! 如果大家喜欢的话，后面可以考虑再出个增强图片、**分辨率的工具，让你的人像与场景更加清晰！投稿投累了此处内容付费可见此处内容需要向楼主支付铜钱才能显示支付 9 铜钱免责申明 - 论坛版权1、本站所有资源均来自会员分享或网络收集整理,仅供会员交流学习，禁用商业用途或盈利,下载后请在24小时之内删除； 2、本站（www.975w.com）支持正版，本资源版权归版权方所有，观看或阅读请到相应机构购买正版资源； 3、本站资源均来源于网络，本站不参与录制、上传，如本帖侵犯到任何版权问题，请立即告知本站(97889527#qq.com(#=@))，本站将及时予与删除并致以最深的歉意；楼主热贴求泰剧《美丽的谎言》高清我要租用你的对应网盘用于下载因为我没有会员，有的带价格来。[悬赏/拍卖] 求泰剧沃拉娜特·旺萨莞和平采娜·乐维瑟派布恩主演的高清我要租用你的对应网盘用于下载因为我没有会员，有的带价格来。[悬赏/拍卖] 八字排盘工具(2024-4-17)[程序/软件] 求泰剧纱丽迷情高清我要租用你的对应网盘用于下载因为我没有会员，有的带价格来。[悬赏/拍卖] 求泰剧红尘伊莎高清我要租用你的对应网盘用于下载因为我没有会员，有的带价格来。[悬赏/拍卖] [泰国][2017][火之迷恋][平采娜·乐维瑟派布恩 / 玛茶榕·栓勒玛 / 朱塔吾·帕塔拉刚普][27集全][泰国语中字][每集约1G][NF-HD1080P.X265.10BIT.AC3][海外电视剧] 求泰剧火之迷恋高清我要租用你的对应网盘用于下载因为我没有会员，有的带价格来。[悬赏/拍卖] 求泰剧火之迷恋高清我要租用你的对应网盘用于下载因为我没有会员，有的带价格来。[悬赏/拍卖] 八字排盘工具(2024-3-29更新排大运说明）[程序/软件] 建议论坛支持用123网盘[舌战群儒专区] 八字排盘工具(2024-3-21v3)[程序/软件] C#源代码，救为此代码添加自动适应屏幕的代码然后把修改后的给我，最多给你6000[悬赏/拍卖]
	收藏2 唵嘛呢叭咪吽 BT资源无法下载：戳这里，不会发帖、铜钱相关等新手问题：戳这里
	回复拉黑使用道具举报

[影视图像] [Windows] AI一键『视频插帧』工具（Interpolation tool by CS）

阳光心情

动漫达人

摸金校尉

荣誉会员

优秀会员

普通精华

长期在线

老会员勋章

热心人士