数字人视频的帧率提高方法、装置、设备及存储介质与流程

allin2025-08-05  27


本发明涉及图片处理领域及金融科技领域,尤其涉及一种数字人视频的帧率提高方法、装置、计算机设备及计算机可读存储介质。


背景技术:

1、数字人,是利用信息科学的方法对人体在不同水平的形态和功能进行虚拟仿真。其包括四个交叉重叠的发展阶段,即可视人、物理人、生理人及智能人,最终建立多学科和多层次的数字模型并达到对人体从微观到宏观的精确模拟。在业内数字人应用中,在低配置机器显示高分辨率的数字人视频时,渲染引擎渲染出的视频帧率难以达到25fps。

2、因此,如何提高数字人视频的帧率,成为了目前亟待解决的技术问题。


技术实现思路

1、本发明的主要目的在于提供一种数字人视频的帧率提高方法、装置、设备及计算机可读存储介质,旨在避免集中登录造成的登录风暴,以提升金融业务系统的稳定性的技术问题。

2、为实现上述目的,本发明提供一种数字人视频的帧率提高方法,所述帧率提高方法包括以下步骤:

3、基于视频处理模型中的图片重建模块,对数字人对应的至少两张初始图片进行正向计算,以对所述初始图片进行重建,得到重建图片;

4、在所述重建图片中,确定至少一对图片对,并基于所述视频处理模型中的图像预测模块,对各个图片对的中间帧进行预测,得到所述图片对对应的至少一张中间帧图片,其中,每个图片对包括前后两帧图片;

5、基于所述视频处理模型中的视频插帧模块,在每个图片对之间插入对应的中间帧图片,以提高所述数据人视频的帧率。

6、此外,为实现上述目的,本发明还提供一种数字人视频的帧率提高装置,所述数字人视频的帧率提高装置包括:

7、图片重建模块,用于基于视频处理模型中的图片重建模块,对数字人对应的至少两张初始图片进行正向计算,以对所述初始图片进行重建,得到重建图片;

8、图片预测模块,用于在所述重建图片中,确定至少一对图片对,并基于所述视频处理模型中的图像预测模块,对各个图片对的中间帧进行预测,得到所述图片对对应的至少一张中间帧图片,其中,每个图片对包括前后两帧图片;

9、图片插帧模块,用于基于所述视频处理模型中的视频插帧模块,在每个图片对之间插入对应的中间帧图片,以提高所述数据人视频的帧率。

10、此外,为实现上述目的,本发明还提供一种计算机设备,所述计算机设备包括处理器、存储器、以及存储在所述存储器上并可被所述处理器执行的数字人视频的帧率提高程序,其中所述数字人视频的帧率提高程序被所述处理器执行时,实现如上述的数字人视频的帧率提高方法的步骤。

11、此外,为实现上述目的,本发明还提供一种计算机可读存储介质,所述计算机可读存储介质上存储有数字人视频的帧率提高程序,其中所述数字人视频的帧率提高程序被处理器执行时,实现如上述的数字人视频的帧率提高方法的步骤。

12、本申请提供一种数字人视频的帧率提高方法,所述方法基于视频处理模型中的图片重建模块,对数字人对应的至少两张初始图片进行正向计算,以对所述初始图片进行重建,得到重建图片;在所述重建图片中,确定至少一对图片对,并基于所述视频处理模型中的图像预测模块,对各个图片对的中间帧进行预测,得到所述图片对对应的至少一张中间帧图片,其中,每个图片对包括前后两帧图片;基于所述视频处理模型中的视频插帧模块,在每个图片对之间插入对应的中间帧图片,以提高所述数据人视频的帧率。通过上述方式,本申请基于视频处理模型中的图片重建模块对数字人对应的图片进行重建,以提高图片的分辨率,然后通过视频处理模型中的图像预测模块,对前后图片帧之间的中间帧进行学习推理,并通过视频处理模型中的视频插帧模块,将中间帧插入到对应的前后图片帧之间,由此提高了数字人对应的视频帧率,从而提高了数字人对应的视频播放流畅度。



技术特征:

1.一种数字人视频的帧率提高方法,其特征在于,所述帧率提高方法包括以下步骤:

2.如权利要求1所述的数字人视频的帧率提高方法,其特征在于,所述基于视频处理模型中的图片重建模块,对数字人对应的至少两张初始图片进行正向计算,以对所述初始图片进行重建,得到重建图片之前,还包括:

3.如权利要求1所述的数字人视频的帧率提高方法,其特征在于,所述基于视频处理模型中的图片重建模块,对数字人对应的至少两张初始图片进行正向计算,以对所述初始图片进行重建,得到重建图片之前,还包括:

4.如权利要求1所述的数字人视频的帧率提高方法,其特征在于,所述基于所述视频处理模型中的图像预测模块,对各个图片对的中间帧进行预测,得到所述图片对对应的至少一张中间帧图片,其中,每个图片对包括前后两帧图片之前,还包括:

5.如权利要求1所述的数字人视频的帧率提高方法,其特征在于,所述基于所述视频处理模型中的图像预测模块,对各个图片对的中间帧进行预测,得到所述图片对对应的至少一张中间帧图片,具体包括:

6.如权利要求1-6中任一项所述的数字人视频的帧率提高方法,其特征在于,所述基于所述视频处理模型中的图像预测模块,对各个图片对的中间帧进行预测,得到所述图片对对应的至少一张中间帧图片之后,还包括:

7.如权利要求6所述的数字人视频的帧率提高方法,其特征在于,所述基于所述视频处理模型中的图像增强模块,对各张中间帧图片进行光流增强,包括:

8.一种数字人视频的帧率提高装置,其特征在于,所述数字人视频的帧率提高装置包括:

9.一种计算机设备,其特征在于,所述计算机设备包括处理器、存储器、以及存储在所述存储器上并可被所述处理器执行的数字人视频的帧率提高程序,其中所述数字人视频的帧率提高程序被所述处理器执行时,实现如权利要求1至7中任一项所述的数字人视频的帧率提高方法的步骤。

10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有数字人视频的帧率提高程序,其中所述数字人视频的帧率提高程序被处理器执行时,实现如权利要求1至7中任一项所述的数字人视频的帧率提高方法的步骤。


技术总结
本申请涉及图像处理领域,本申请提供一种数字人视频的帧率提高方法,所述方法基于视频处理模型中的图片重建模块,对数字人对应的至少两张初始图片进行正向计算,以对所述初始图片进行重建,得到重建图片;在所述重建图片中,确定至少一对图片对,并基于所述视频处理模型中的图像预测模块,对各个图片对的中间帧进行预测,得到所述图片对对应的至少一张中间帧图片;基于所述视频处理模型中的视频插帧模块,在每个图片对之间插入对应的中间帧图片。本申请对数字人对应的图片进行重建,然后对前后图片帧之间的中间帧进行学习推理,并将中间帧插入插帧,由此提高了数字人对应的视频帧率,从而提高了数字人对应的视频播放流畅度。

技术研发人员:张磊,陈远旭,葛昊
受保护的技术使用者:平安科技(深圳)有限公司
技术研发日:
技术公布日:2024/10/31
转载请注明原文地址: https://www.8miu.com/read-23729.html

最新回复(0)