行业标准网
(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210303579.3 (22)申请日 2022.03.24 (71)申请人 北京字跳网络技 术有限公司 地址 100190 北京市海淀区紫金 数码园4号 楼2层0207 (72)发明人 杨定东 雷凯翔 尹淳骥  (74)专利代理 机构 北京远智汇知识产权代理有 限公司 1 1659 专利代理师 刘欣 (51)Int.Cl. H04N 5/232(2006.01) H04N 5/265(2006.01) H04N 21/234(2011.01) (54)发明名称 视频处理方法、 装置、 电子设备及存 储介质 (57)摘要 本公开实施例提供了一种视频处理方法、 装 置、 电子设备及存储介质, 该方法包括: 获取待处 理视频帧; 将所述待处理视频帧输入至图像处理 模型中, 以得到与所述待处理视频帧相对应的目 标视频帧; 其中, 所述图像处理模型中包括对待 处理视频帧处理的抗混叠算子, 所述抗混叠算子 中包括抗混叠上采样算子、 抗混叠非线性算子以 及抗混叠 下采样算子; 通过对各目标视频帧拼接 处理, 得到目标视频。 本公开实施例的技术方案, 在原视频相邻几帧图像出现较大改变时, 可以有 效避免输 出的视频画面发生 “抖动”, 在解决画面 “抖动”问题的同时, 也不会降低图像的质量以及 清晰度, 提高了用户的使用体验。 权利要求书2页 说明书14页 附图2页 CN 114640796 A 2022.06.17 CN 114640796 A 1.一种视频处 理方法, 其特 征在于, 包括: 获取待处 理视频帧; 将所述待处理视频帧输入至图像处理模型中, 以得到与 所述待处理视频帧相对应的目 标视频帧; 其中, 所述图像处理模型中包括对待处理视频帧处理的抗混叠算子, 所述抗混叠 算子中包括 抗混叠上采样算子、 抗混叠非线性 算子以及抗混叠下采样算子; 通过对各目标视频帧拼接处 理, 得到目标视频。 2.根据权利要求1所述的方法, 其特征在于, 所述将所述待处理视频帧输入至图像处理 模型中, 以得到与所述待处 理视频帧相对应的目标视频帧, 包括: 在基于所述图像处理模型对所述待处理视频帧非线性处理时, 基于所述抗混叠算子中 的抗混叠上采样算子、 抗混叠非线性算子以及抗混叠下采样算子依次对所述待处理视频帧 进行处理, 以得到目标效果的目标视频帧; 其中, 所述目标效果与未 抖动效果相一 致。 3.根据权利要求2所述的方法, 其特征在于, 所述基于所述抗混叠算子中的抗混叠上采 样算子、 抗混叠非线性算子以及抗混叠下采样算子依 次对所述待处理视频帧进行处理, 包 括: 在检测到对待处理视频帧非线性处理时, 将与 所述待处理视频帧相对应的当前张量信 息作为所述抗混叠上采样算子的输入, 基于所述抗混叠上采样算子对所述当前张量信息插 值处理, 得到第一预处 理张量; 基于所述抗混叠非线性算子对所述第 一预处理张量所对应的信号频谱扩大至少两倍, 得到与所述第一预处 理图像相对应的目标信号频谱; 基于所述抗混叠下采样算子对所述目标信号频谱进行下采样处理, 并控制下采样频率 为原始采样频率的预设数值; 其中, 所述原始采样频率与所述当前张量的采样频率相一致; 所述预设数值与所述信 号频谱的扩大倍数相对应。 4.根据权利要求3所述的方法, 其特征在于, 所述基于所述抗混叠上采样算子对所述当 前张量信息插值处 理, 得到第一预处 理张量, 包括: 在空间维度上对所述当前张量信息插零处 理, 得到待处 理张量信息; 基于插值函数构建的卷积核对所述待处理张量信 息插值处理, 得到所述第 一预处理张 量。 5.根据权利要求1所述的方法, 其特 征在于, 还 包括: 确定抗混叠算子中抗混叠上采样算子、 抗混叠非线性算子以及抗混叠下采样算子, 并 将所述抗混叠算子部署至待训练图像处理模型中, 以基于训练样本集中的各训练样本对所 述待训练图像处 理模型训练 处理, 得到所述图像处 理模型。 6.根据权利要求5所述的方法, 其特 征在于, 还 包括: 对所述抗混叠算子 中的抗混叠上采样算子进行优化, 并保持线性算子和抗混叠下采样 算子不变, 得到目标抗混叠算子, 并将所述 目标抗混叠算子部署在所述待训练图像处理模 型中; 基于训练样本集对所述待训练图像处理模型进行训练, 得到所述图像处理模型, 以将 所述图像处 理模型部署至算力小于预设算力阈值的终端设备。权 利 要 求 书 1/2 页 2 CN 114640796 A 27.根据权利要求6所述的方法, 其特征在于, 所述对所述抗混叠算子 中的抗混叠上采样 算子进行优化, 得到目标抗混叠算子, 包括: 基于原始采样频率、 所述抗混叠下采样算子所对应的截止频率、 与滤波器所对应的滤 波频率、 插值函数以及预设窗的宽度, 确定待使用卷积核; 其中, 所述待使用卷积核中包括 多个待使用值; 通过对所述待 使用卷积核分离处 理, 确定两个待应用卷积核; 基于两个待应用卷积核, 确定所述 抗混叠上采样算子 。 8.根据权利要求7所述的方法, 其特征在于, 所述基于两个待应用卷积核, 确定所述抗 混叠上采样算子, 包括: 通过对两个待应用卷积核组合处理, 得到至少四个待部署卷积核, 并将所述至少四个 待部署卷积和作为所述 抗混叠上采样算子 。 9.根据权利要求8所述的方法, 其特征在于, 基于抗混叠上采样算子对待处理视频帧进 行处理, 包括: 基于所述抗混叠上采样算子中的至少四个待部署卷积核对与所述待处理视频帧相对 应的当前张量信息进行处理, 得到第一预处理张量, 以基于所述 目标抗混叠算子中的抗混 叠非线性 算子和抗混叠下采样算子依次对所述第一预处 理张量进行处 理。 10.一种视频处 理装置, 其特 征在于, 包括: 待处理视频帧获取模块, 用于获取待处 理视频帧; 目标视频帧确定模块, 用于将所述待处理视频帧输入至 图像处理模型中, 以得到与所 述待处理视频帧相对应的目标视频帧; 其中, 所述图像处理模型中包括对待处理视频帧处 理的抗混叠算子, 所述抗混叠算子中包括抗混叠上采样算子、 抗混叠非线性算子以及抗混 叠下采样算子; 目标视频生成模块, 用于通过对各目标视频帧拼接处 理, 得到目标视频。 11.一种电子设备, 其特 征在于, 所述电子设备包括: 一个或多个处 理器; 存储装置, 用于存 储一个或多个程序, 当所述一个或多个程序被所述一个或多个处理器执行, 使得所述一个或多个处理器实 现如权利要求1 ‑9中任一所述的视频处 理方法。 12.一种包含计算机可执行指令的存储介质, 所述计算机可执行指令在由计算机处理 器执行时用于执 行如权利要求1 ‑9中任一所述的视频处 理方法。权 利 要 求 书 2/2 页 3 CN 114640796 A 3

.PDF文档 专利 视频处理方法、装置、电子设备及存储介质

文档预览
中文文档 19 页 50 下载 1000 浏览 0 评论 309 收藏 3.0分
温馨提示:本文档共19页,可预览 3 页,如浏览全部内容或当前文档出现乱码,可开通会员下载原始文档
专利 视频处理方法、装置、电子设备及存储介质 第 1 页 专利 视频处理方法、装置、电子设备及存储介质 第 2 页 专利 视频处理方法、装置、电子设备及存储介质 第 3 页
下载文档到电脑,方便使用
本文档由 人生无常 于 2024-03-18 13:24:36上传分享
站内资源均来自网友分享或网络收集整理,若无意中侵犯到您的权利,敬请联系我们微信(点击查看客服),我们将及时删除相关资源。