视频处理方法、装置、电子设备和介质实用新型专利

专利名称：视频处理方法、装置、电子设备和介质

专利类型：实用新型专利

专利申请号：CN202210111752.X

专利申请（专利权）人：维沃移动通信有限公司
权利人地址：广东省东莞市长安镇维沃路1号

专利发明（设计）人：程鹏,刘文强

专利摘要：本申请公开了一种视频处理方法、装置、电子设备和可读存储介质，属于图像处理技术领域。其中，所述方法包括：获取第一摄像头以第一帧率采集的第一视频，第二摄像头以第二帧率采集的第二视频，所述第一帧率不同于所述第二帧率；接收用户的第一输入；响应于所述第一输入，输出第三视频，所述第三视频由所述第一视频中第一对象的视频、所述第二视频中除所述第一对象之外的对象的视频融合得到。

主权利要求：
1.一种视频处理方法，其特征在于，所述方法包括：获取第一摄像头以第一帧率采集的第一视频，第二摄像头以第二帧率采集的第二视频，所述第一帧率不同于所述第二帧率；
接收用户的第一输入；
响应于所述第一输入，输出第三视频，所述第三视频由所述第一视频中第一对象的视频、所述第二视频中除所述第一对象之外的对象的视频融合得到；
所述输出所述第三视频之前，所述方法还包括以下至少任一项：根据所述第二视频中除所述第一对象以外的对象的视频光源信息，调整所述第三视频中所述第一对象的视频光源信息；
根据所述第二视频中所述第一对象所在图层、与除所述第一对象以外的对象所在图层之间的位置关系，调整所述第三视频中所述第一对象所在图层的位置信息。
2.根据权利要求1所述的方法，其特征在于，所述第一帧率大于所述第二帧率，所述方法还包括：获取所述第一视频中第一目标帧数的第一子视频，所述第一目标帧数与所述第二视频的帧数相同，所述第一子视频的视频时长小于所述第一视频的视频时长；
所述输出第三视频，所述第三视频由所述第一视频中第一对象的视频、所述第二视频中除所述第一对象之外的对象的视频融合得到包括：输出第三视频，所述第三视频由所述第一子视频中第一对象的视频、所述第二视频中除所述第一对象之外的对象的视频融合得到。
3.根据权利要求1所述的方法，其特征在于，所述第一帧率小于所述第二帧率，所述方法还包括：获取所述第二视频中第二目标帧数的第二子视频，所述第二目标帧数与所述第一视频的帧数相同，所述第二子视频的视频时长小于所述第二视频的视频时长；
所述输出第三视频，所述第三视频由所述第一视频中第一对象的视频、所述第二视频中除所述第一对象之外的对象的视频融合得到包括：输出第三视频，所述第三视频由所述第一视频中第一对象的视频、所述第二子视频中除所述第一对象之外的对象的视频融合得到。
4.根据权利要求1所述的方法，其特征在于，所述输出第三视频之前，所述方法还包括：获取所述第二视频中所述第一对象与第二对象的相对位置信息；
所述第一视频中第一对象的视频、所述第二视频中除所述第一对象之外的对象的视频融合，包括：根据所述相对位置信息，将所述第一视频中所述第一对象的视频，与所述第一视频中所述第二对象的视频融合；
其中，所述第二对象为所述第二视频中除所述第一对象以外的对象中的至少一个。
5.根据权利要求1所述的方法，其特征在于，所述第一对象包括第三对象和第四对象；
所述第三视频中所述第三对象的运动速度，是所述第二视频中所述第三对象的运动速度的第一倍数；
所述第三视频中所述第四对象的运动速度，是所述第二视频中所述第四对象的运动速度的第二倍数；
其中，所述第一倍数不同于所述第二倍数。
6.根据权利要求1所述的方法，其特征在于，所述获取第一摄像头以第一帧率采集的第一视频之前，所述方法还包括：显示帧率选择控件；
接收用户对所述帧率选择控件的第二输入；
响应于所述第二输入，以所述第一帧率采集所述第一视频，以所述第二帧率采集所述第二视频。
7.一种视频处理装置，其特征在于，所述装置包括：第一获取模块，用于获取第一摄像头以第一帧率采集的第一视频，第二摄像头以第二帧率采集的第二视频，所述第一帧率不同于所述第二帧率；
第一接收模块，用于接收用户的第一输入；
输出模块，用于响应于所述第一输入，输出第三视频，所述第三视频由所述第一视频中第一对象的视频、所述第二视频中除所述第一对象之外的对象的视频融合得到；
所述装置还包括：
第一调整模块，用于根据第二视频中除第一对象以外的对象的视频光源信息，调整第三视频中第一对象的视频光源信息；
第二调整模块，用于根据第二视频中第一对象所在图层、与除第一对象以外的对象所在图层之间的位置关系，调整第三视频中第一对象所在图层的位置信息。
8.一种电子设备，其特征在于，包括处理器和存储器，所述存储器存储可在所述处理器上运行的程序或指令，所述程序或指令被所述处理器执行时实现如权利要求1‑6任一项所述的视频处理方法的步骤。
9.一种可读存储介质，其特征在于，所述可读存储介质上存储程序或指令，所述程序或指令被处理器执行时实现如权利要求1‑6任一项所述的视频处理方法的步骤。 说明书 : 视频处理方法、装置、电子设备和介质技术领域[0001] 本申请属于图像处理技术领域，具体涉及一种视频处理方法、装置、电子设备和可读存储介质。背景技术[0002] 目前，用户对视频编辑功能的要求越来越高，用户希望通过对视频的编辑，可以使视频达到预期的播放效果。[0003] 其中，在视频编辑中，用户可对视频的播放速度进行倍速，以达到快速播放或放慢播放的效果。例如，在播放视频的过程中，用户按照预设输入方式点击屏幕，弹出快进1.5倍、快进2倍的选项，如x1.5、x2的控件，用户点击x1.5的控件，从而从当前时刻开始，视频以快进1.5倍的速度进行播放。[0004] 在现有技术中，只能基于时间段这一维度对视频播放速度进行调整，调整方式单一。发明内容[0005] 本申请实施例的目的是提供一种视频处理方法，能够解决在现有技术中，只能基于时间段这一维度对视频播放速度进行调整，调整方式单一的问题。[0006] 第一方面，本申请实施例提供了一种视频处理方法，该方法包括：获取第一摄像头以第一帧率采集的第一视频，第二摄像头以第二帧率采集的第二视频，所述第一帧率不同于所述第二帧率；接收用户的第一输入；响应于所述第一输入，输出第三视频，所述第三视频由所述第一视频中第一对象的视频、所述第二视频中除所述第一对象之外的对象的视频融合得到。[0007] 第二方面，本申请实施例提供了一种视频处理装置，该装置包括：第一获取模块，用于获取第一摄像头以第一帧率采集的第一视频，第二摄像头以第二帧率采集的第二视频，所述第一帧率不同于所述第二帧率；第一接收模块，用于接收用户的第一输入；输出模块，用于响应于所述第一输入，输出第三视频，所述第三视频由所述第一视频中第一对象的视频、所述第二视频中除所述第一对象之外的对象的视频融合得到。[0008] 第三方面，本申请实施例提供了一种电子设备，该电子设备包括处理器和存储器，所述存储器存储可在所述处理器上运行的程序或指令，所述程序或指令被所述处理器执行时实现如第一方面所述的方法的步骤。[0009] 第四方面，本申请实施例提供了一种可读存储介质，所述可读存储介质上存储程序或指令，所述程序或指令被处理器执行时实现如第一方面所述的方法的步骤。[0010] 第五方面，本申请实施例提供了一种芯片，所述芯片包括处理器和通信接口，所述通信接口和所述处理器耦合，所述处理器用于运行程序或指令，实现如第一方面所述的方法。[0011] 第六方面，本申请实施例提供一种计算机程序产品，该程序产品被存储在存储介质中，该程序产品被至少一个处理器执行以实现如第一方面所述的方法。[0012] 在本申请的实施例中，采用了两组摄像头分别以不同的帧率进行图像的采集，从而可分别获取第一摄像头采集的第一视频，以及第二摄像头采集的第二视频。进一步地，基于用户的第一输入，在第一视频中确定第一对象，同时，基于用户第一输入，明确第一对象为需要添加快速特效还是慢速特效；从而根据第一视频和第二视频之间的帧率关系，将一个视频(即作为第一视频)中的第一对象，与另一个视频(即作为第二视频)中的其它对象进行融合，输出第三视频。可见，在输出的第三视频中，不同帧率的对象融合在一起，可以达到对象之间相对加速、相对减速的效果。从而，在本申请实施例中，能够将拍摄背景、拍摄主体等拍摄对象作为一个新的维度，对视频播放速度进行调整，使得视频中呈现出拍摄对象单独的加速、减速效果，进而使得调整方式变得丰富。附图说明[0013] 图1是本申请实施例的视频处理方法的流程图；[0014] 图2是本申请实施例的视频处理方法的操作示意图之一；[0015] 图3是本申请实施例的视频处理方法的操作示意图之二；[0016] 图4是本申请实施例的视频处理方法的说明示意图之一；[0017] 图5是本申请实施例的视频处理方法的说明示意图之二；[0018] 图6是本申请实施例的视频处理方法的操作示意图之三；[0019] 图7是本申请实施例的视频处理装置的框图；[0020] 图8是本申请实施例的电子设备的硬件结构示意图之一；[0021] 图9是本申请实施例的电子设备的硬件结构示意图之二。具体实施方式[0022] 下面将结合本申请实施例的附图，对本申请实施例的技术方案进行清楚地描述，显然，所描述的实施例是本申请一部分实施例，而不是全部的实施例。基于本申请的实施例，本领域普通技术人员获得的所有其他实施例，都属于本申请保护的范围。[0023] 本申请的说明书和权利要求书的术语“第一”、“第二”等是用于区别类似的对象，而不用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便本申请的实施例能够以除了在这里图示或描述的那些以外的顺序实施，且“第一”、“第二”等所区分的对象通常为一类，并不限定对象的个数，例如第一对象可以是一个，也可以是多个。此外，说明书以及权利要求中“和/或”表示所连接对象的至少其中之一，字符“/”，一般表示前后关联对象是一种“或”的关系。[0024] 下面结合附图，通过具体的实施例及其应用场景对本申请实施例提供的视频处理方法进行详细地说明。[0025] 图1示出了本申请一个实施例的视频处理方法的流程图，该方法应用于电子设备，包括：[0026] 步骤110：获取第一摄像头以第一帧率采集的第一视频，第二摄像头以第二帧率采集的第二视频，第一帧率不同于第二帧率。[0027] 在本申请中，电子设备包括第一摄像头和第二摄像头，第一摄像头和第二摄像头基于同一拍摄场景进行图像采集。[0028] 例如，第一摄像头和第二摄像头均为电子设备的前置摄像头；又如，第一摄像头和第二摄像头均为电子设备的后置摄像头。[0029] 其中，第一摄像头和第二摄像头可相邻设置，以实现基于同一拍摄场景，以相近、甚至相同的拍摄角度，进行图像采集。[0030] 在该步骤中，在拍摄模式下，第一摄像头和第二摄像头同时进入工作状态，以基于同一拍摄场景，分别采集图像，从而获取第一摄像头采集的第一视频和第二摄像头采集的第二视频。[0031] 其中，第一摄像头与第二摄像头分别以不同的帧率进行图像采集，以用于在本申请中实现对所拍摄视频进行播放速度的个性化调整。[0032] 可选地，第一帧率和第二帧率可由用户通过输入确定。[0033] 可选地，第一帧率和第二帧率可根据电子设备预设帧率参数确定。[0034] 本实施例的应用场景如，用户点击“录像”控件，开始录像，两组摄像头分别按预设的帧率采集图像。[0035] 可选地，在图像预览界面中分别显示两组摄像头采集的图像。[0036] 进一步地，在完成拍摄后，在目标界面显示第一视频和第二视频中的至少一个。[0037] 应用场景如，用户点击“录像”控件，停止录像，弹出提示框，进入特效编辑模式，在图2所示的界面显示第一视频或者第二视频，进一步地，用户点击“切换”控件201，切换第二视频或者第一视频。[0038] 步骤120：接收用户的第一输入。[0039] 第一输入包括用户在屏幕上进行的触摸输入，不限于点击、滑动、拖动等输入；第一输入还可以是用户的隔空输入，手势动作、脸部动作等，第一输入还包括用户在设备上对实体按键的输入，不限于按动等输入。而且，第一输入包括一个或者多个输入，其中，多个输入可以是连续的，也可以是间断的。[0040] 在该步骤中，第一输入用于用户在第一视频中选择第一对象。[0041] 应用场景如，在图3中，显示第一视频的情况下，点击第一对象。例如，第一对象为图中方框选中的老师和学生中的至少一个。[0042] 步骤130：响应于第一输入，输出第三视频，第三视频由第一视频中第一对象的视频、第二视频中除所述第一对象之外的对象的视频融合得到。[0043] 在该步骤中，输出基于融合得到的第三视频。[0044] 应用场景如，录制甲和乙两个人跳舞，分别使用30fps和60fps两个帧率，录制时长为5s。若统一将两个视频的帧率调整到30fps，则在原30fps对应视频中的人物动作速度不变，而原60fps对应视频的时长变为10s，相应的人物动作放慢2倍。基于此，将30fps对应视频中的人物甲分割出来，与60fps对应视频中除人物甲的部分融合，最终得到的视频呈现出人物甲的动作速度是人物乙的动作速度的2倍的特效效果。[0045] 可见，在上述应用场景中，基于两个不同帧率视频，可以将一个视频中的对象与另一个视频中的其它对象进行融合，以在最终得到的视频中呈现出不同对象的动作速度不同的特效效果。[0046] 可选地，本申请可在视频中呈现出的特效效果包括但不限于：同一个对象，相对于视频背景，动作速度随着播放进度变快、变慢；不同对象，相对于视频背景，动作速度随着播放进度分别变快、变慢。[0047] 在该步骤中，第一输入还用于针对第一对象设定变速信息。[0048] 应用场景如，在图3中，用户在设置弹窗中点击“主体‑慢速”控件301体。[0049] 可选地，本实施例所适用的视频，其包括进行动作(如运动)的对象，以作为第一对象，进行动作速度的调整。[0050] 这样，在本申请的实施例中，采用了两组摄像头分别以不同的帧率进行图像的采集，从而可分别获取第一摄像头采集的第一视频，以及第二摄像头采集的第二视频。进一步地，基于用户的第一输入，在第一视频中确定第一对象，同时，基于用户第一输入，明确第一对象是需要添加减速特效还是减速特效；从而根据第一视频和第二视频之间的帧率关系，将一个视频(即作为第一视频)中的第一对象，与另一个视频(即作为第二视频)中的其它对象进行融合，以输出最终处理后的第三视频。可见，在输出的第三视频中，不同帧率的对象融合在一起，可以达到对象之间相对加速、相对减速的效果。从而，在本申请实施例中，能够将拍摄背景、拍摄主体等拍摄对象作为一个新的维度，对视频播放速度进行调整，使得视频中呈现出拍摄对象单独的加速、减速效果，进而使得调整方式变得丰富。[0051] 在本申请另一个实施例中，第一帧率大于第二帧率。[0052] 该方法还包括：[0053] 步骤A1：获取第一视频中第一目标帧数的第一子视频，第一目标帧数与第二视频的帧数相同，第一子视频的视频时长小于第一视频的视频时长。[0054] 在本实施例中，在变速信息指示第一对象减速的情况下，即第一对象相比于视频中的其它对象，动作速度减慢。采取的融合方法为：将高帧率视频中的第一对象分割出来，与低帧率视频中除第一对象以外的其它对象融合。[0055] 对应地，在本实施例中，将帧率较高的视频作为第一视频，将帧率较低的视频作为第一视频。[0056] 可参考地，在融合的过程中，将第一视频的第N帧，与第二视频的对应帧进行融合。高帧率视频与低帧率视频二者相比，高帧率视频的帧数较多，而低帧率视频的帧数较少，因此在融合过程中，可以低帧率视频的帧数为准，舍弃一部分高帧率视频的帧。因此，第一视频中用于融合的第一子视频，其对应的第一目标帧数，与用于融合的第二视频的帧数相同。[0057] 其中，舍弃的部分帧可以是连续的，也可以是不连续的，因此，保留下来的第一目标帧数可以是连续的帧数，也可以是不连续的帧数。[0058] 对应地，第一子视频为舍弃部分帧后的第一视频，其视频时长小于第一视频的视频时长。[0059] 在更多的实施例中，可以采取合成新帧的方式，进行融合，而无需舍弃帧。例如，可以根据相邻帧，合成新的帧。[0060] 步骤130包括：[0061] 子步骤A2：输出第三视频，第三视频由第一子视频中第一对象的视频、第二视频中除第一对象之外的对象的视频融合得到。[0062] 可选地，参见图4，在融合过程中，可识别第一视频(图中的左侧视频)中的第一对象(图中的人物)所在的目标区域，以将该目标区域分割出来，放置于第二视频(图中的右侧视频)中的第一对象对应区域。[0063] 在本实施例中，提供了一种用于呈现出第一对象减速特效的处理方式。[0064] 在本申请另一个实施例中，第一帧率小于第二帧率。[0065] 该方法还包括：[0066] 步骤B1：获取第二视频中第二目标帧数的第二子视频，第二目标帧数与第一视频的帧数相同，第二子视频的视频时长小于第二视频的视频时长。[0067] 在本实施例中，在变速信息指示第一对象加速的情况下，即第一对象相比于视频中的其它对象，动作速度加快。采取的融合方法为：将低帧率视频中的第一对象分割出来，与高帧率视频中除第一对象以外的其它对象融合。[0068] 对应地，在本实施例中，将帧率较低的视频作为第一视频，将帧率较高的视频作为第二视频。[0069] 可参考地，在融合的过程中，将第一视频的第N帧，与第二视频的对应帧进行融合。高帧率视频与低帧率视频二者相比，高帧率视频的帧数较多，而低帧率视频的帧数较少，因此在融合过程中，以低帧率视频的帧数为准，舍弃一部分高帧率视频的帧。第二视频中用于融合的第二子视频，其对应的第二目标帧数，与用于融合的第一视频的帧数相同。[0070] 其中，舍弃的部分帧可以是连续的，也可以是不连续的，因此，保留下来的第二目标帧数可以是连续的帧数，也可以是不连续的帧数。[0071] 对应地，第二子视频为舍弃部分帧后的第二视频，其视频时长小于第二视频的视频时长。[0072] 在更多的实施例中，可以采取合成新帧的方式，进行融合，而无需舍弃帧。例如，可以根据相邻帧，合成新的帧。[0073] 步骤130包括：[0074] 子步骤B2：输出第三视频，第三视频由第一视频中第一对象的视频、第二子视频中除第一对象之外的对象的视频融合得到。[0075] 可选地，参见图4，在融合过程中，可识别第一视频(图中的左侧视频)中的第一对象(图中的人物)所在的目标区域，以将该目标区域分割出来，放置于第二视频(图中的右侧视频)中的第一对象对应区域。[0076] 在本实施例中，提供了一种用于呈现出第一对象加速特效的处理方式。[0077] 在本申请另一个实施例中，对于某个视频，可以划分出多个播放时间段，从而可以针对不同的时间段，进行变速调整。[0078] 应用场景如，在一个视频中，针对同一对象可以实现多段变速的特效效果，以两段变速(如先快后慢)为例，参见图3，用户点击“主体‑快速”控件302，再选中视频中的某人物作为第一对象，拖动视频进度条至某一位置，即完成视频前部分的加速调整；然后，点击“主体‑慢速”控件301，再选中视频中的同一人物作为第一对象，拖动视频进度条至结束位置，即完成视频后部分的减速调整。在输出的视频中，可达到前半段视频某人物动作速度快于背景，后半段视频该人物动作速度慢于背景的特效效果。[0079] 应用场景又如，在一个视频中，针对不同对象可以实现多段变速的特效效果，以两段变速，且每段对象不同为例，参见图3，用户点击“主体‑快速”控件302，再选中视频中的老师这一人物作为第一对象，拖动视频进度条至某一位置，即完成视频前部分的加速调整；然后，点击“主体‑慢速”控件302，再选中视频中的一个学生这一人物作为第一对象，拖动视频进度条至结束位置，即完成视频后部分的变速调整。在输出的视频中，可达到前半段视频老师动作速度快于背景，后半段视频学生动作速度慢于背景的特效效果。[0080] 其中，在上述多个应用场景中，背景可以由除第一对象以外的所有其它对象组成。[0081] 在本实施例中，对某一播放时间段内的第一对象进行变速调整后，使得该播放时间段对应的视频时长进行相应地增减。[0082] 例如，对某个时间段内的第一对象进行加速调整，该时间段的时长为10s，从而该时间段段内的第一对象的动作速度被加速如两倍完成，因此，对应的时长由10s删减到5s。可选地，保留该时间段的开始时刻至缩短后的结束时刻。如该时间段为视频的00：00～00:10，缩减后，该时间段对应为视频的00：00～00:05。[0083] 又如，对某个时间段内的第一对象进行减速调整，该时间段的时长为10s，从而该时间段内的第一对象的动作速度被减速如两倍完成，因此，对应的时长由10s增加到20s。可选地，保留该时间段的开始时刻和结束时刻，延长部分可以删除。[0084] 在更多的方案中，也可由用户自定义保留部分，以与视频其它部分拼接。[0085] 在本实施例中，在针对不同的对象，可分别进行变速调整的基础上，还增加了时间这一维度，以在不同的时间段内，进行对象的变速调整，从而使得视频特效效果更佳丰富。[0086] 在本申请另一个实施例中，对于某个视频的同一时间段，可以针对不同的对象，进行不同的变速调整。[0087] 应用场景如，参见图3，用户点击“主体‑快速”控件301，再选中视频中的老师这一人物作为第一对象，即完成对老师的加速调整；然后，点击“主体‑慢速”控件302，再选中视频中的一个学生这一人物作为第一对象，即完成对学生的变速调整；最后，拖动视频进度条至某位置(如结束位置)。在输出的视频中，可达到视频的某一时间段内，老师速度快于背景，学生速度慢于背景的特效效果。[0088] 例如，输出的视频包括低帧率视频和高帧率视频，首先，将低帧率视频中的“老师”与高帧率视频中除“老师”之外的背景视频融合，输出融合后的高帧率视频，以完成对“老师”的加速调整；然后，将低帧率视频帧率提高至大于高帧率，以将调整帧率后的视频中的“学生”与原高帧率视频融合，以完成对“学生”的减速调整。[0089] 在本申请另一个实施例的视频处理方法的流程中，在步骤130之前，该方法还包括：[0090] 步骤C1：获取第二视频中第一对象与第二对象的相对位置信息。[0091] 在本实施例中，一方面，两组摄像头的拍摄角度可能存在差异；第二方面，融合后因第一对象的动作速度调整后，第一对象与其它对象之间的相对位置发生偏移。基于上述两方面的考虑，可能导致两个视频融合后，第一对象的位置发生位移，因此，为了增加对象之间的融合准确度，可参照融合前，各个对象之间的相对位置，对第一对象进行位置调整。[0092] 应用场景如，参见图3，用户点击“背景”控件303，从而可以在显示的视频中，选择除第一对象以外的其它任意对象，以作为该步骤中的第二对象。[0093] 进一步地，在融合前，在第二视频中，获取第一对象和第二对象之间的相对位置信息。[0094] 对应地，第一视频中第一对象的视频、第二视频中除第一对象之外的对象的视频融合，包括：[0095] 根据相对位置信息，将第一视频中第一对象的视频，与第一视频中第二对象的视频融合。[0096] 其中，第二对象为第二视频中除第一对象以外的对象中的至少一个。[0097] 在本实施例的融合过程中，可以根据前述步骤得到的相对位置信息，将第一视频中的第一对象，与第二视频中的第二对象进行融合。[0098] 参见图5，在第二视频中，除第一对象以外的任意对象，均可以作为第二对象。[0099] 例如，参见图5，视频中的人物为第一对象，然后基于第二视频中人物与树、太阳之间的相对位置关系，对多个对象进行融合。[0100] 其中，图5用于表示视频中的某帧图像，在融合过程中，可针对视频中的每一帧进行融合。[0101] 在本实施例中，为了提高融合的精准度，以确保编辑视频的真实性，可参见融合之前，各个对象之间的位置关系，进行融合，以还原视频画面。[0102] 在本申请另一个实施例中，第一对象包括第三对象和第四对象；[0103] 第三视频中第三对象的运动速度，是第二视频中第三对象的运动速度的第一倍数；[0104] 第三视频中第四对象的运动速度，是第二视频中第四对象的运动速度的第二倍数；[0105] 其中，第一倍数不同于第二倍数。[0106] 在本实施例中，基于不同帧率的两个视频，结合用户输入，可以灵活设置特效效果。[0107] 例如，参见图3，用户点击界面中的“主体3倍速”控件304，若当前两个视频对应帧率之间不具备3倍的关系，如分别是60fps和30fps，则可以对一个视频进行帧率的调整，使二者之间的帧率满足3倍的关系。进一步地，基于调整后的两个视频，再进入对象之间的融合。[0108] 基于此，在本实施例中，第三对象和第四对象可分别表示一个对象。因此，基于用户输入，可以在输出的第三视频中，呈现出同一时间段内，一个对象(即第三对象)，相比于视频背景，运动速度加快或者减慢第一倍数；另一个对象(即第四对象)，相比于视频背景，运动速度加快或者减慢第二倍数。即两个对象的运行速度可以呈现出不同倍数的变化效果，以丰富视频特效效果。[0109] 应用场景如，参见图3，用户点击“主体3倍速”控件304和“主体‑快速”控件301，再选中视频中的老师这一人物作为第一对象，即完成对老师的加速调整；然后，“主体2倍速”控件305和“主体‑快速”控件301，再选中视频中的一个学生这一人物作为第一对象，即完成对学生的变速调整。在输出的视频中，可达到视频的某一时间段内，老师速度以3倍数快于背景，学生速度以3倍数快于背景的特效效果。[0110] 在本申请另一个实施例的视频处理方法的流程中，在步骤110之前，该方法还包括：[0111] 步骤D1：显示帧率选择控件。[0112] 应用场景如，参见图6，用户打开“相机”应用，进入“变速录像”模式，显示第一摄像头(Cameral1)控件601和第二摄像头(Cameral2)控件602。[0113] 步骤D2：接收用户对帧率选择控件的第二输入。[0114] 第二输入包括用户在屏幕上进行的触摸输入，不限于点击、滑动、拖动等输入；第二输入还可以是用户的隔空输入，手势动作、脸部动作等，第二输入还包括用户在设备上对实体按键的输入，不限于按动等输入。第二输入包括一个或者多个输入，其中，多个输入可以是连续的，也可以是间断的。[0115] 在该步骤中，第二输入用于设定第一帧率和第二帧率。[0116] 应用场景如，参见图6，用户点击Cameral1控件601，显示帧率设置窗口，用户点击“60fps”子控件603；用户点击Cameral2控件602，显示帧率设置窗口，用户点击“30fps”子控件604。[0117] 可选地，电子书设备屏幕显示当前设定的帧率。[0118] 步骤D3：响应于第二输入，以第一帧率采集第一视频；以及，以第二帧率采集第二视频。[0119] 应用场景如，参见图6，用户点击“录像”控件605，开始录像，第一摄像头以第一帧率采集第一视频；以及，第二摄像头以第二帧率采集第二视频。[0120] 可选地，开始拍摄后，显示的提示文字可以隐藏，以避免遮挡预览。[0121] 可参考地，第一帧率是第二帧率的目标倍数，从而可以对第一对象的动作速度，实现加速调整或者减速调整。[0122] 在本实施例中，可由用户预先设定第一帧率和第二帧率，以在分别采集到对应帧率的视频的基础上，基于第一帧率与第二帧率之间的关系，针对某个对象进行速度调整，从而丰富视频特效效果。[0123] 在本申请另一个实施例的视频处理方法的流程中，在步骤130之前，该方法还包括：[0124] 步骤E1：根据第二视频中除第一对象以外的对象的视频光源信息，调整第三视频中第一对象的视频光源信息。[0125] 在该步骤中，基于拍摄场景的光源分布、光线明暗变化等，会在视频的背景中呈现出视频光源信息。因此，可以将第二视频用作视频背景，以根据第二视频的视频光源信息，对融合后的第一对象的视频光源信息进行调整，使得第一对象与视频背景结合地更自然、不生硬。[0126] 步骤E2：根据第二视频中第一对象所在图层、与除第一对象以外的对象所在图层之间的位置关系，调整第三视频中第一对象所在图层的位置信息。[0127] 在该步骤中，基于拍摄场景的各个对象的位置分布，会在视频中呈现出各个对象之间的遮挡关系。其中，遮挡关系可以通过各个对象所在图层之间的位置关系来体现。因此，可以第二视频中各个对象所在图层的位置关系为准，对融合后的第一对象所在图层的位置信息进行调整，使得第一对象与各个对象结合地更自然、不生硬。[0128] 可选地，图层的位置信息如第几层。[0129] 在本实施例中，在融合对象之后，以及输出视频之前，结合实际拍摄场景，针对与第一对象相关的一些环境相关因素进行微调，以使得输出的视频更加真实，从而在满足多样化视频特效的基础上，确保视频的高质量。[0130] 在本申请另一个实施例中，在多组摄像头之间视差距较小的前提下，可以考虑采用更多数量(如三组)摄像头，多组摄像头分别以不同的帧率采集视频，从而使得变速特效的应用更加灵活。[0131] 例如，输出的视频包括低帧率视频、中帧率视频和高帧率视频，首先，将低帧率视频中的老师与中帧率视频融合，输出融合后的中帧率视频，以完成对老师的加速调整；然后，再将高帧率视频中的学生与中帧率视频融合，输出再次融合后的中帧率视频，以完成对学生的减速调整。[0132] 综上，在本申请实施例中，利用双摄分别以不同帧率录制的两个视频，可以实现两个视频间的对象融合，以实现同主体/不同主体、同时间段/不同时间段的变速特效，增加视频后期处理的可玩性。[0133] 本申请实施例提供的视频处理方法，执行主体可以为视频处理装置。本申请实施例中以视频处理装置执行视频处理方法为例，说明本申请实施例提供的视频处理装置。[0134] 图7示出了本申请另一个实施例的视频处理装置的框图，该装置包括：[0135] 第一获取模块10，用于获取第一摄像头以第一帧率采集的第一视频，第二摄像头以第二帧率采集的第二视频，第一帧率不同于第二帧率；[0136] 第一接收模块20，用于接收用户的第一输入；[0137] 输出模块30，用于响应于第一输入，输出第三视频，第三视频由第一视频中第一对象的视频、第二视频中除第一对象之外的对象的视频融合得到。[0138] 在本申请的实施例中，采用了两组摄像头分别以不同的帧率进行图像的采集，从而可分别获取第一摄像头采集的第一视频，以及第二摄像头采集的第二视频。进一步地，基于用户的第一输入，在第一视频中确定第一对象，同时，基于用户第一输入，明确第一对象是需要添加减速特效还是减速特效；从而根据第一视频和第二视频之间的帧率关系，将一个视频(即作为第一视频)中的第一对象，与另一个视频(即作为第二视频)中的其它对象进行融合，以输出最终处理后的第三视频。可见，在输出的第三视频中，不同帧率的对象融合在一起，可以达到对象之间相对加速、相对减速的效果。从而，在本申请实施例中，能够将拍摄背景、拍摄主体等拍摄对象作为一个新的维度，对视频播放速度进行调整，使得视频中呈现出拍摄对象单独的加速、减速效果，进而使得调整方式变得丰富。[0139] 可选地，第一帧率大于第二帧率，该装置还包括：[0140] 第二获取模块，用于获取第一视频中第一目标帧数的第一子视频，第一目标帧数与第二视频的帧数相同，第一子视频的视频时长小于第一视频的视频时长；[0141] 输出模块30包括：[0142] 第一输出子单元，用于输出第三视频，第三视频由第一子视频中第一对象的视频、第二视频中除第一对象之外的对象的视频融合得到。[0143] 可选地，第一帧率小于第二帧率，该装置还包括：[0144] 第三获取模块，用于获取第二视频中第二目标帧数的第二子视频，第二目标帧数与第一视频的帧数相同，第二子视频的视频时长小于第二视频的视频时长；[0145] 输出模块30包括：[0146] 第二输出单元，用于输出第三视频，第三视频由第一视频中第一对象的视频、第二子视频中除第一对象之外的对象的视频融合得到。[0147] 可选地，该装置还包括：[0148] 第三获取模块，用于获取第二视频中第一对象与第二对象的相对位置信息；[0149] 融合模块，用于根据相对位置信息，将第一视频中第一对象的视频，与第一视频中第二对象的视频融合；[0150] 其中，第二对象为第二视频中除第一对象以外的对象中的至少一个。[0151] 可选地，第一对象包括第三对象和第四对象；[0152] 第三视频中第三对象的运动速度，是第二视频中第三对象的运动速度的第一倍数；[0153] 第三视频中第四对象的运动速度，是第二视频中第四对象的运动速度的第二倍数；[0154] 其中，第一倍数不同于第二倍数。[0155] 可选地，该装置还包括：[0156] 显示模块，用于显示帧率选择控件；[0157] 第二接收模块，用于接收用户对帧率选择控件的第二输入；[0158] 采集模块，用于响应于第二输入，以第一帧率采集第一视频；以及，以第二帧率采集第二视频。[0159] 可选地，该装置还包括：[0160] 第一调整模块，用于根据第二视频中除第一对象以外的对象的视频光源信息，调整第三视频中第一对象的视频光源信息；[0161] 第二调整模块，用于根据第二视频中第一对象所在图层、与除第一对象以外的对象所在图层之间的位置关系，调整第三视频中第一对象所在图层的位置信息。[0162] 本申请实施例中的视频处理装置可以是电子设备，也可以是电子设备中的部件，例如集成电路或芯片。该电子设备可以是终端，也可以为除终端之外的其他设备。示例性的，电子设备可以为手机、平板电脑、笔记本电脑、掌上电脑、车载电子设备、移动上网装置(MobileInternetDevice，MID)、增强现实(augmentedreality，AR)/虚拟现实(virtualreality，VR)设备、机器人、可穿戴设备、超级移动个人计算机(ultra‑mobilepersonalcomputer，UMPC)、上网本或者个人数字助理(personaldigitalassistant，PDA)等，还可以为服务器、网络附属存储器(NetworkAttachedStorage，NAS)、个人计算机(personalcomputer，PC)、电视机(television，TV)、柜员机或者自助机等，本申请实施例不作具体限定。[0163] 本申请实施例的视频处理装置可以为具有动作系统的装置。该动作系统可以为安卓(Android)动作系统，可以为ios动作系统，还可以为其他可能的动作系统，本申请实施例不作具体限定。[0164] 本申请实施例提供的视频处理装置能够实现上述方法实施例实现的各个过程，为避免重复，这里不再赘述。[0165] 可选地，如图8所示，本申请实施例还提供一种电子设备100，包括处理器101，存储器102，存储在存储器102上并可在所述处理器101上运行的程序或指令，该程序或指令被处理器101执行时实现上述任一视频处理方法实施例的各个步骤，且能达到相同的技术效果，为避免重复，这里不再赘述。[0166] 需要说明的是，本申请实施例的电子设备包括上述所述的移动电子设备和非移动电子设备。[0167] 图9为实现本申请实施例的一种电子设备的硬件结构示意图。[0168] 该电子设备1000包括但不限于：射频单元1001、网络模块1002、音频输出单元1003、输入单元1004、传感器1005、显示单元1006、用户输入单元1007、接口单元1008、存储器1009、以及处理器1010等部件。[0169] 本领域技术人员可以理解，电子设备1000还可以包括给各个部件供电的电源(比如电池)，电源可以通过电源管理系统与处理器1010逻辑相连，从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。图9中示出的电子设备结构并不构成对电子设备的限定，电子设备可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置，在此不再赘述。[0170] 其中，处理器1010，用于获取第一摄像头以第一帧率采集的第一视频，第二摄像头以第二帧率采集的第二视频，所述第一帧率不同于所述第二帧率；控制用户输入单元1007接收用户的第一输入；响应于所述第一输入，输出第三视频，所述第三视频由所述第一视频中第一对象的视频、所述第二视频中除所述第一对象之外的对象的视频融合得到。[0171] 在本申请的实施例中，采用了两组摄像头分别以不同的帧率进行图像的采集，从而可分别获取第一摄像头采集的第一视频，以及第二摄像头采集的第二视频。进一步地，基于用户的第一输入，在第一视频中确定第一对象，同时，基于用户第一输入，明确第一对象是需要添加减速特效还是减速特效；从而根据第一视频和第二视频之间的帧率关系，将一个视频(即作为第一视频)中的第一对象，与另一个视频(即作为第二视频)中的其它对象进行融合，以输出最终处理后的第三视频。可见，在输出的第三视频中，不同帧率的对象融合在一起，可以达到对象之间相对加速、相对减速的效果。从而，在本申请实施例中，能够将拍摄背景、拍摄主体等拍摄对象作为一个新的维度，对视频播放速度进行调整，使得视频中呈现出拍摄对象单独的加速、减速效果，进而使得调整方式变得丰富。[0172] 可选地，所述第一帧率大于所述第二帧率，处理器1010，还用于获取所述第一视频中第一目标帧数的第一子视频，所述第一目标帧数与所述第二视频的帧数相同，所述第一子视频的视频时长小于所述第一视频的视频时长；输出第三视频，所述第三视频由所述第一子视频中第一对象的视频、所述第二视频中除所述第一对象之外的对象的视频融合得到。[0173] 可选地，所述第一帧率小于所述第二帧率，处理器1010，还用于获取所述第二视频中第二目标帧数的第二子视频，所述第二目标帧数与所述第一视频的帧数相同，所述第二子视频的视频时长小于所述第二视频的视频时长；输出第三视频，所述第三视频由所述第一视频中第一对象的视频、所述第二子视频中除所述第一对象之外的对象的视频融合得到。[0174] 可选地，处理器1010还用于获取所述第二视频中所述第一对象与第二对象的相对位置信息；根据所述相对位置信息，将所述第一视频中所述第一对象的视频，与所述第一视频中所述第二对象的视频融合；其中，所述第二对象为所述第二视频中除所述第一对象以外的对象中的至少一个。[0175] 可选地，所述第一对象包括第三对象和第四对象；所述第三视频中所述第三对象的运动速度，是所述第二视频中所述第三对象的运动速度的第一倍数；所述第三视频中所述第四对象的运动速度，是所述第二视频中所述第四对象的运动速度的第二倍数；其中，所述第一倍数不同于所述第二倍数。[0176] 可选地，处理器1010，还用于控制显示单元1006显示帧率选择控件；控制用户输入单元1007接收用户对所述帧率选择控件的第二输入；响应于所述第二输入，以所述第一帧率采集所述第一视频；以及，以所述第二帧率采集所述第二视频。[0177] 可选地，处理器1010，还用于根据所述第二视频中除所述第一对象以外的对象的视频光源信息，调整所述第三视频中所述第一对象的视频光源信息；根据所述第二视频中所述第一对象所在图层、与除所述第一对象以外的对象所在图层之间的位置关系，调整所述第三视频中所述第一对象所在图层的位置信息。[0178] 综上，在本申请实施例中，利用双摄分别以不同帧率录制的两个视频，可以实现两个视频间的对象融合，以实现同主体/不同主体、同时间段/不同时间段的变速特效，增加视频后期处理的可玩性。[0179] 应理解的是，本申请实施例中，输入单元1004可以包括图形处理器(GraphicsProcessingUnit，GPU)10041和麦克风10042，图形处理器10041对在视频图像捕获模式或图像捕获模式中由图像捕获装置(如摄像头)获得的静态图片或视频图像的图像数据进行处理。显示单元1006可包括显示面板10061，可以采用液晶显示器、有机发光二极管等形式来配置显示面板10061。用户输入单元1007包括触控面板10071以及其他输入设备10072中的至少一种。触控面板10071，也称为触摸屏。触控面板10071可包括触摸检测装置和触摸控制器两个部分。其他输入设备10072可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、动作杆，在此不再赘述。存储器1009可用于存储软件程序以及各种数据，包括但不限于应用程序和动作系统。处理器1010可集成应用处理器和调制解调处理器，其中，应用处理器主要处理动作系统、用户页面和应用程序等，调制解调处理器主要处理无线通信。可以理解的是，上述调制解调处理器也可以不集成到处理器1010中。[0180] 存储器1009可用于存储软件程序以及各种数据。存储器1009可主要包括存储程序或指令的第一存储区和存储数据的第二存储区，其中，第一存储区可存储操作系统、至少一个功能所需的应用程序或指令(比如声音播放功能、图像播放功能等)等。此外，存储器1009可以包括易失性存储器或非易失性存储器，或者，存储器x09可以包括易失性和非易失性存储器两者。其中，非易失性存储器可以是只读存储器(Read‑OnlyMemory，ROM)、可编程只读存储器(ProgrammableROM，PROM)、可擦除可编程只读存储器(ErasablePROM，EPROM)、电可擦除可编程只读存储器(ElectricallyEPROM，EEPROM)或闪存。易失性存储器可以是随机存取存储器(RandomAccessMemory，RAM)，静态随机存取存储器(StaticRAM，SRAM)、动态随机存取存储器(DynamicRAM，DRAM)、同步动态随机存取存储器(SynchronousDRAM，SDRAM)、双倍数据速率同步动态随机存取存储器(DoubleDataRateSDRAM，DDRSDRAM)、增强型同步动态随机存取存储器(EnhancedSDRAM，ESDRAM)、同步连接动态随机存取存储器(SynchlinkDRAM，SLDRAM)和直接内存总线随机存取存储器(DirectRambusRAM，DRRAM)。本申请实施例中的存储器1009包括但不限于这些和任意其它适合类型的存储器。[0181] 处理器1010可包括一个或多个处理单元；可选的，处理器1010集成应用处理器和调制解调处理器，其中，应用处理器主要处理涉及操作系统、用户界面和应用程序等的操作，调制解调处理器主要处理无线通信信号，如基带处理器。可以理解的是，上述调制解调处理器也可以不集成到处理器1010中。[0182] 本申请实施例还提供一种可读存储介质，所述可读存储介质上存储有程序或指令，该程序或指令被处理器执行时实现上述视频处理方法实施例的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。[0183] 其中，所述处理器为上述实施例中所述的电子设备中的处理器。所述可读存储介质，包括计算机可读存储介质，如计算机只读存储器ROM、随机存取存储器RAM、磁碟或者光盘等。[0184] 本申请实施例另提供了一种芯片，所述芯片包括处理器和通信接口，所述通信接口和所述处理器耦合，所述处理器用于运行程序或指令，实现上述视频处理方法实施例的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。[0185] 应理解，本申请实施例提到的芯片还可以称为系统级芯片、系统芯片、芯片系统或片上系统芯片等。[0186] 本申请实施例提供一种计算机程序产品，该程序产品被存储在存储介质中，该程序产品被至少一个处理器执行以实现如上述视频处理方法实施例的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。[0187] 需要说明的是，在本文中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。此外，需要指出的是，本申请实施方式中的方法和装置的范围不限按示出或讨论的顺序来执行功能，还可包括根据所涉及的功能按基本同时的方式或按相反的顺序来执行功能，例如，可以按不同于所描述的次序来执行所描述的方法，并且还可以添加、省去、或组合各种步骤。另外，参照某些示例所描述的特征可在其他示例中被组合。[0188] 通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本申请的技术方案本质上或者说对现有技术做出贡献的部分可以以计算机软件产品的形式体现出来，该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中，包括若干指令用以使得一台终端(可以是手机，计算机，服务器，或者网络设备等)执行本申请各个实施例所述的方法。[0189] 上面结合附图对本申请的实施例进行了描述，但是本申请并不局限于上述的具体实施方式，上述的具体实施方式仅仅是示意性的，而不是限制性的，本领域的普通技术人员在本申请的启示下，在不脱离本申请宗旨和权利要求所保护的范围情况下，还可做出很多形式，均属于本申请的保护之内。

专利地区：广东

专利申请日期：2022-01-29

专利公开日期：2024-07-26

专利公告号：CN114466232B