一种短视频制作生成处理方法、设备及计算机存储介质与流程

1.本发明涉及短视频制作生成技术领域，涉及到一种短视频制作生成处理方法、设备及计算机存储介质。


背景技术：

2.随着移动终端的不断普及和网络访问速度的加快，短视频因其短平快、大流量等特点，逐渐获得用户的青睐。人们在短视频制作过程中，喜欢对短视频进行生成编辑处理，这样能够大大地丰富短视频内容。
3.目前，现有的短视频制作生成处理技术存在如下缺陷：
4.1、现有的短视频制作生成处理方法大部分通过人工手动为短视频添加字幕，这样不仅导致短视频制作生成处理的智能化程度降低，而且存在短视频的播放音频与字幕不匹配的问题，从而使得短视频的正常观看效果受到影响，进而降低人们对短视频的观看体验感和兴趣感；
5.2、现有的短视频制作生成处理方法根据人工制作经验设置字幕对比度，无法根据短视频的图像对比度进行智能设置，存在短视频字幕与图像对比度差异不明显的问题，导致短视频的整体观看质量降低，从而无法满足人们的多样化观看需求；
6.为了解决以上问题，现设计一种短视频制作生成处理方法、设备及计算机存储介质。


技术实现要素：

7.本发明的目的在于提供一种短视频制作生成处理方法、设备及计算机存储介质，本发明通过将短视频素材划分成各段子视频，获取短视频素材内各段子视频中各视频帧图像的前景图像和背景图像，并进行图像处理，同时检测短视频素材内各段子视频中各视频帧图像的前景和背景处理图像对比度，分析短视频素材内各段子视频的综合图像对比度，计算短视频素材内各段子视频中字幕对比度，同时识别和审核短视频素材内各段子视频中文本信息，获取短视频素材内各段子视频中音频出现时间和音频消失时间，计算短视频素材内各段子视频中字幕出现速度，并将短视频素材内各段子视频中文本信息进行对应的字幕对比度设置和对应出现时间段内对应字幕出现速度的调整处理，解决了背景技术中存在的问题。
8.本发明的目的可以通过以下技术方案实现：
9.一种短视频制作生成处理方法，包括以下步骤：
10.s1、短视频素材划分：通过将导入的短视频素材进行划分，按照设定的划分规则将短视频素材划分成各段子视频，并依次进行编号；
11.s2、视频帧图像分割：通过获取短视频素材内各段子视频中各视频帧图像，分别对短视频素材内各段子视频中各视频帧图像进行分割，得到短视频素材内各段子视频中各视频帧图像的前景图像和背景图像；
12.s3、视频帧图像处理：通过采用图像处理技术分别对短视频素材内各段子视频中各视频帧图像的前景图像和背景图像进行处理，得到短视频素材内各段子视频中各视频帧图像的前景处理图像和背景处理图像；
13.s4、图像对比度检测：通过分别检测短视频素材内各段子视频中各视频帧图像的前景处理图像对比度和背景处理图像对比度，分析短视频素材内各段子视频的综合图像对比度；
14.s5、字幕对比度分析：通过提取存储数据库中存储的短视频中视频图像与字幕的标准对比度比值，计算短视频素材内各段子视频中字幕对比度；
15.s6、视频音频信息识别：通过语音识别技术分别对短视频素材内各段子视频中音频信息进行识别，转换获得短视频素材内各段子视频中文本信息；
16.s7、文本信息审核：通过分别对短视频素材内各段子视频中文本信息进行语义关联审核和结构关联审核，若短视频素材内某段子视频中文本信息的语义关联或结构关联不符合，则通过人工对该段子视频中文本信息进行适当修正；
17.s8、音频出现、消失时间获取：通过获取短视频素材内各段子视频中音频出现时间和音频消失时间，统计短视频素材内各段子视频中文本信息出现的时间段，计算短视频素材内各段子视频中字幕出现速度；
18.s9、视频字幕设置处理：通过将短视频素材内各段子视频中文本信息按照对应的字幕对比度进行设置，并将短视频素材内各段子视频中文本信息在对应出现时间段内进行对应的字幕出现速度调整处理。
19.进一步地，所述步骤s1中通过按照视频语音停顿顺序将短视频素材划分成各段子视频，并按照视频播放先后顺序依次进行编号，其中短视频素材内各段子视频的编号分别为1,2,...,i,...,n。
20.进一步地，所述步骤s2中包括统计短视频素材内各段子视频中各视频帧图像的前景图像，构成短视频素材内各段子视频中各视频帧图像的前景图像集合p
i
a(p
i
a1,p
i
a2,...,p
i
a
j
,...,p
i
a
m
)，p
i
a
j
表示为短视频素材内第i段子视频中第j个视频帧图像的前景图像；同时统计短视频素材内各段子视频中各视频帧图像的背景图像，构成短视频素材内各段子视频中各视频帧图像的背景景图像集合p
i
b(p
i
b1,p
i
b2,...,p
i
b
j
,...,p
i
b
m
)，p
i
b
j
表示为短视频素材内第i段子视频中第j个视频帧图像的背景图像。
21.进一步地，所述步骤s3中采用的图像处理技术包括分别对短视频素材内各段子视频中各视频帧图像的前景图像和背景图像进行几何归一化处理，变换为固定标准形式的各段子视频中各视频帧图像的前景图像和背景图像，并对变换后各段子视频中各视频帧图像的前景图像进行优化增强处理，对变换后各段子视频中各视频帧图像的背景图像进行虚化处理。
22.进一步地，所述步骤s4中包括以下步骤：
23.s41、对短视频素材内各段子视频中各视频帧图像的前景处理图像对比度进行检测，构成短视频素材内各段子视频中各视频帧图像的前景处理图像对比度集合k
i
a(k
i
a1,k
i
a2,...,k
i
a
j
,...,k
i
a
m
)，k
i
a
j
表示为短视频素材内第i段子视频中第j个视频帧图像的前景处理图像对比度；
24.s42、并对短视频素材内各段子视频中各视频帧图像的背景处理图像对比度进行
检测，构成短视频素材内各段子视频中各视频帧图像的背景处理图像对比度集合k
i
b(k
i
b1,k
i
b2,...,k
i
b
j
,...,k
i
b
m
)，k
i
b
j
表示为短视频素材内第i段子视频中第j个视频帧图像的背景处理图像对比度；
25.s43、计算短视频素材内各段子视频的综合图像对比度表示为短视频素材内第i段子视频的综合图像对比度，m表示为短视频素材内第i段子视频中视频帧图像数量，α、β分别表示为视频帧图像中前景图像、背景图像对应的权重比例系数，其中α β＝1。
26.进一步地，所述短视频素材内各段子视频中字幕对比度计算公式为k
′
i
表示为短视频素材内第i段子视频中字幕对比度，λ
标
表示为短视频中视频图像与字幕的标准对比度比值。
27.进一步地，所述步骤s6中采用的语音识别技术包括以下步骤：
28.s61、对短视频素材内各段子视频中音频信息进行滤波、分帧预处理，除去冗余信息；
29.s62、提取各段子视频中音频信息内影响语音识别的关键信息和表达语音含义的特征信息；
30.s63、根据各段子视频中音频信息内特征信息，用最小单元识别字词，并根据各段子视频中音频信息对应的语法，按照先后顺序依次识别字词；
31.s64、按照语义分析将各段子视频中识别出的字词进行连接，同时根据语句意思调整句子构成，得到短视频素材内各段子视频中文本信息。
32.进一步地，所述步骤s8中包括以下步骤：
33.s81、获取短视频素材内各段子视频中音频出现时间，构成短视频素材内各段子视频中音频出现时间集合t(t1,t2,...,t
i
,...,t
n
)，t
i
表示为短视频素材内第i段子视频中音频出现时间；
34.s82、并获取短视频素材内各段子视频中音频消失时间，构成短视频素材内各段子视频中音频消失时间集合t
′
(t
′1,t
′2,...,t
′
i
,...,t
′
n
)，t
′
i
表示为短视频素材内第i段子视频中音频消失时间；
35.s83、提取短视频素材内各段子视频中文本信息的字数，计算短视频素材内各段子视频中字幕出现速度v
i
表示为短视频素材内第i段子视频中字幕出现速度，x
i
表示为短视频素材内第i段子视频中文本信息的字数。
36.一种设备，包括：处理器，以及与处理器连接的内存和网络接口；所述网络接口与服务器中的非易失性存储器连接；所述处理器在运行时通过所述网络接口从所述非易失性存储器中调取计算机程序，并通过所述内存运行所述计算机程序，以执行上述本发明所述的一种短视频制作生成处理方法。
37.一种计算机存储介质，所述计算机存储介质烧录有计算机程序，所述计算机程序在服务器的内存中运行时实现上述本发明所述的一种短视频制作生成处理方法。
38.有益效果：
39.(1)本发明提供的一种短视频制作生成处理方法、设备及计算机存储介质，通过将短视频素材划分成各段子视频，获取短视频素材内各段子视频中各视频帧图像的前景图像和背景图像，并进行图像处理，从而减少图像分析所需的时间以及任务量，同时检测短视频素材内各段子视频中各视频帧图像的前景和背景处理图像对比度，分析短视频素材内各段子视频的综合图像对比度，计算短视频素材内各段子视频中字幕对比度，并将短视频素材内各段子视频中文本信息进行对应的字幕对比度设置，从而实现短视频字幕对比度的智能设置功能，使得短视频字幕与图像对比度差异足够明显，提高短视频的整体观看质量，进而满足人们的多样化观看需求。
40.(2)本发明通过识别和审核短视频素材内各段子视频中文本信息，从而增加短视频中文本信息识别的准确性和可靠性，并获取短视频素材内各段子视频中音频出现时间和音频消失时间，计算短视频素材内各段子视频中字幕出现速度，并将短视频素材内各段子视频中文本信息进行对应出现时间段内对应字幕出现速度的调整处理，从而保证短视频的播放音频与字幕能够匹配，避免影响短视频的正常观看效果，进而提高短视频制作生成处理的智能化程度，增加人们对短视频的观看体验感和兴趣感。
附图说明
41.为了更清楚地说明本发明实施例的技术方案，下面将对实施例描述所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
42.图1为本发明的示意图。
具体实施方式
43.下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其它实施例，都属于本发明保护的范围。
44.请参阅图1所示，一种短视频制作生成处理方法，包括以下步骤：
45.s1、短视频素材划分：通过将导入的短视频素材进行划分，按照设定的划分规则将短视频素材划分成各段子视频，并依次进行编号。
46.在本实施例中，所述步骤s1中通过按照视频语音停顿顺序将短视频素材划分成各段子视频，并按照视频播放先后顺序依次进行编号，其中短视频素材内各段子视频的编号分别为1,2,...,i,...,n，为后期分析短视频素材内各段子视频的相关数据奠定基础。
47.s2、视频帧图像分割：通过获取短视频素材内各段子视频中各视频帧图像，分别对短视频素材内各段子视频中各视频帧图像进行分割，得到短视频素材内各段子视频中各视频帧图像的前景图像和背景图像。
48.在本实施例中，所述步骤s2中包括统计短视频素材内各段子视频中各视频帧图像的前景图像，构成短视频素材内各段子视频中各视频帧图像的前景图像集合p
i
a(p
i
a1,p
i
a2,...,p
i
a
j
,...,p
i
a
m
)，p
i
a
j
表示为短视频素材内第i段子视频中第j个视频帧图像的前景
图像；同时统计短视频素材内各段子视频中各视频帧图像的背景图像，构成短视频素材内各段子视频中各视频帧图像的背景景图像集合p
i
b(p
i
b1,p
i
b2,...,p
i
b
j
,...,p
i
b
m
)，p
i
b
j
表示为短视频素材内第i段子视频中第j个视频帧图像的背景图像。
49.s3、视频帧图像处理：通过采用图像处理技术分别对短视频素材内各段子视频中各视频帧图像的前景图像和背景图像进行处理，得到短视频素材内各段子视频中各视频帧图像的前景处理图像和背景处理图像。
50.在本实施例中，所述步骤s3中采用的图像处理技术包括分别对短视频素材内各段子视频中各视频帧图像的前景图像和背景图像进行几何归一化处理，变换为固定标准形式的各段子视频中各视频帧图像的前景图像和背景图像，并对变换后各段子视频中各视频帧图像的前景图像进行优化增强处理，对变换后各段子视频中各视频帧图像的背景图像进行虚化处理。
51.具体地，本发明通过将短视频素材划分成各段子视频，获取短视频素材内各段子视频中各视频帧图像的前景图像和背景图像，并进行图像处理，从而减少图像分析所需的时间以及任务量。
52.s4、图像对比度检测：通过分别检测短视频素材内各段子视频中各视频帧图像的前景处理图像对比度和背景处理图像对比度，分析短视频素材内各段子视频的综合图像对比度。
53.在本实施例中，所述步骤s4中包括以下步骤：
54.s41、对短视频素材内各段子视频中各视频帧图像的前景处理图像对比度进行检测，构成短视频素材内各段子视频中各视频帧图像的前景处理图像对比度集合k
i
a(k
i
a1,k
i
a2,...,k
i
a
j
,...,k
i
a
m
)，k
i
a
j
表示为短视频素材内第i段子视频中第j个视频帧图像的前景处理图像对比度；
55.s42、并对短视频素材内各段子视频中各视频帧图像的背景处理图像对比度进行检测，构成短视频素材内各段子视频中各视频帧图像的背景处理图像对比度集合k
i
b(k
i
b1,k
i
b2,...,k
i
b
j
,...,k
i
b
m
)，k
i
b
j
表示为短视频素材内第i段子视频中第j个视频帧图像的背景处理图像对比度；
56.s43、计算短视频素材内各段子视频的综合图像对比度表示为短视频素材内第i段子视频的综合图像对比度，m表示为短视频素材内第i段子视频中视频帧图像数量，α、β分别表示为视频帧图像中前景图像、背景图像对应的权重比例系数，其中α β＝1。
57.s5、字幕对比度分析：通过提取存储数据库中存储的短视频中视频图像与字幕的标准对比度比值，计算短视频素材内各段子视频中字幕对比度。
58.在本实施例中，所述短视频素材内各段子视频中字幕对比度计算公式为k
′
i
表示为短视频素材内第i段子视频中字幕对比度，λ
标
表示为短视频中视频图像与字幕的标准对比度比值。
59.具体地，本发明通过检测短视频素材内各段子视频中各视频帧图像的前景和背景处理图像对比度，分析短视频素材内各段子视频的综合图像对比度，计算短视频素材内各
段子视频中字幕对比度，从而使得短视频字幕与图像对比度差异足够明显，提高短视频的整体观看质量，进而满足人们的多样化观看需求，为后期对各段子视频中字幕对比度设置提供可靠的参考依据。
60.s6、视频音频信息识别：通过语音识别技术分别对短视频素材内各段子视频中音频信息进行识别，转换获得短视频素材内各段子视频中文本信息。
61.在本实施例中，所述步骤s6中采用的语音识别技术包括以下步骤：
62.s61、对短视频素材内各段子视频中音频信息进行滤波、分帧预处理，除去冗余信息；
63.s62、提取各段子视频中音频信息内影响语音识别的关键信息和表达语音含义的特征信息；
64.s63、根据各段子视频中音频信息内特征信息，用最小单元识别字词，并根据各段子视频中音频信息对应的语法，按照先后顺序依次识别字词；
65.s64、按照语义分析将各段子视频中识别出的字词进行连接，同时根据语句意思调整句子构成，得到短视频素材内各段子视频中文本信息。
66.s7、文本信息审核：通过分别对短视频素材内各段子视频中文本信息进行语义关联审核和结构关联审核，若短视频素材内某段子视频中文本信息的语义关联或结构关联不符合，则对该段子视频中文本信息进行适当修正。
67.在本实施例中，若短视频素材内某段子视频中文本信息的语义关联和结构关联均符合，表明该段子视频中文本信息审核通过，若短视频素材内某段子视频中文本信息的语义关联或结构关联不符合，表明该段子视频中文本信息审核不通过，则通过人工对该段子视频中文本信息进行适当修正。
68.具体地，本发明通过识别和审核短视频素材内各段子视频中文本信息，从而增加短视频中文本信息识别的准确性和可靠性。
69.s8、音频出现、消失时间获取：通过获取短视频素材内各段子视频中音频出现时间和音频消失时间，统计短视频素材内各段子视频中文本信息出现的时间段，计算短视频素材内各段子视频中字幕出现速度。
70.在本实施例中，所述步骤s8中包括以下步骤：
71.s81、获取短视频素材内各段子视频中音频出现时间，构成短视频素材内各段子视频中音频出现时间集合t(t1,t2,...,t
i
,...,t
n
)，t
i
表示为短视频素材内第i段子视频中音频出现时间；
72.s82、并获取短视频素材内各段子视频中音频消失时间，构成短视频素材内各段子视频中音频消失时间集合t
′
(t
′1,t
′2,...,t
′
i
,...,t
′
n
)，t
′
i
表示为短视频素材内第i段子视频中音频消失时间；
73.s83、提取短视频素材内各段子视频中文本信息的字数，计算短视频素材内各段子视频中字幕出现速度v
i
表示为短视频素材内第i段子视频中字幕出现速度，x
i
表示为短视频素材内第i段子视频中文本信息的字数。
74.具体地，本发明通过获取短视频素材内各段子视频中音频出现时间和音频消失时间，计算短视频素材内各段子视频中字幕出现速度，从而保证短视频的播放音频与字幕能
够匹配，避免影响短视频的正常观看效果，为后期对各子视频中字幕调整处理提供可靠的参考依据。
75.s9、视频字幕设置处理：通过将短视频素材内各段子视频中文本信息按照对应的字幕对比度进行设置，并将短视频素材内各段子视频中文本信息在对应出现时间段内进行对应的字幕出现速度调整处理。
76.具体地，本发明通过将短视频素材内各段子视频中文本信息进行对应的字幕对比度设置，从而实现短视频字幕对比度的智能设置功能，并将短视频素材内各段子视频中文本信息进行对应出现时间段内对应字幕出现速度的调整处理，从而提高短视频制作生成处理的智能化程度，增加人们对短视频的观看体验感和兴趣感。
77.一种设备，包括：处理器，以及与处理器连接的内存和网络接口；所述网络接口与服务器中的非易失性存储器连接；所述处理器在运行时通过所述网络接口从所述非易失性存储器中调取计算机程序，并通过所述内存运行所述计算机程序，以执行上述本发明所述的一种短视频制作生成处理方法。
78.一种计算机存储介质，所述计算机存储介质烧录有计算机程序，所述计算机程序在服务器的内存中运行时实现上述本发明所述的一种短视频制作生成处理方法。
79.以上内容仅仅是对本发明的构思所作的举例和说明，所属本技术领域的技术人员对所描述的具体实施例做各种各样的修改或补充或采用类似的方式替代，只要不偏离发明的构思或者超越本权利要求书所定义的范围，均应属于本发明的保护范围。