(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210720251.1 (22)申请日 2022.06.23 (71)申请人 中国工商银行股份有限公司 地址 100140 北京市西城区复兴门内大街 55号 (72)发明人 张宏韬　刘华杰　杨晓诚　冯如　 (74)专利代理 机构 北京康信知识产权代理有限 责任公司 1 1240 专利代理师 周春枚 (51)Int.Cl. G06V 20/40(2022.01) G06V 10/764(2022.01) G06V 10/762(2022.01) G06V 10/82(2022.01) G06N 3/04(2006.01) (54)发明名称 视频分类方法、 装置、 处 理器及电子设备 (57)摘要 本申请公开了一种视频分类方法、 装置、 处 理器及电子设备。 涉及人工智 能领域， 该方法包 括： 获取待分类视频； 确定待分类视频的关键帧 和抽样帧； 根据关键帧和抽样帧在待分类视频中 的时间顺序， 对关键帧和抽样帧进行合并得到图 像帧序列； 基于图像帧序列确定待分类视频的分 类结果。 通过本申请， 解决了相关技术中视频分 类效果差的问题。 权利要求书2页 说明书11页 附图2页 CN 115049963 A 2022.09.13 CN 115049963 A 1.一种视频分类方法， 其特 征在于， 包括： 获取待分类视频； 确定所述待分类视频的关键帧和抽样帧； 根据所述关键帧和所述抽 样帧在所述待分类视频中的时间顺序， 对所述关键帧和所述 抽样帧进行合并得到图像帧序列； 基于所述图像帧序列确定所述待分类视频的分类结果。 2.根据权利要求1所述的方法， 其特征在于， 确定所述待分类视频的关键帧和抽 样帧包 括： 确定所述待分类视频的多个图像帧； 在所述多个图像帧中进行抽取， 得到所述抽样帧； 对所述多个图像帧进行聚类， 确定所述关键帧。 3.根据权利要求2所述的方法， 其特征在于， 在所述多个图像帧中进行抽取， 得到所述 抽样帧包括： 按照预定帧数间隔， 在所述多个图像帧中抽取指定帧数对应的图像帧作为所述抽样 帧； 或 按照预定时间间隔， 在所述多个图像帧中抽取指定时间对应的图像帧作为所述抽样 帧。 4.根据权利要求1所述的方法， 其特征在于， 根据 所述关键帧和所述抽样帧在所述待分 类视频中的时间顺序， 对所述关键帧和所述抽样帧进行合并得到图像帧序列包括： 确定所述关键帧在所述待分类视频中的播 放时间为第一 播放时间； 确定所述抽样帧在所述待分类视频中的播 放时间为第二 播放时间； 根据所述第 一播放时间和所述第 二播放时间的时间顺序， 确定所述关键帧和所述抽样 帧的排列顺序； 根据所述关键帧和所述抽样帧的排列顺序， 确定所述图像帧序列。 5.根据权利要求1所述的方法， 其特征在于， 基于所述图像帧序列确定所述待分类视频 的分类结果包括： 将所述图像帧序列中的多个预定图像帧输入预设卷积神经网络模型， 确定每个所述预 定图像帧的特征矩阵和概率， 其中， 所述预定图像 帧包括： 所述关键帧和所述抽样帧， 所述 预设卷积神经网络模型根据已标定特 征的样本图像训练得到； 根据所述图像帧序列中多个预定图像帧的特征矩阵和概率， 确定所述待分类视频的分 类结果。 6.根据权利要求5所述的方法， 其特征在于， 根据 所述图像帧序列中多个预定图像帧的 特征矩阵和概 率， 确定所述待分类视频的分类结果包括： 根据所述特 征矩阵和所述 概率的乘积， 确定每 个所述预定图像帧的特 征结果； 按照所述预定图像帧在所述图像帧序列的顺序， 对所述图像帧序列中多个预定图像帧 的特征结果进行排序， 得到特 征结果序列； 将所述特征结果序列输入预设循环神经网络模型， 确定所述待分类视频的分类结果， 其中， 所述预设循环神经网络模型根据已经标定分类结果的样本视频和所述样本视频对应 的特征结果序列训练得到 。权　利　要　求　书 1/2 页 2 CN 115049963 A 27.根据权利要求5所述的方法， 其特征在于， 在将所述图像帧序列中的多个预定图像帧 输入预设卷积神经网络模型， 确定每个所述预定图像 帧的特征矩阵和概率之后， 所述方法 还包括： 将所述关键帧的概 率调整为预设值； 在所述图像帧序列中删除所述 概率低于预设阈值的抽样帧。 8.一种视频分类装置， 其特 征在于， 包括： 获取单元， 用于获取待分类视频； 第一确定单 元， 用于确定所述待分类视频的关键帧和抽样帧； 合并单元， 用于根据所述关键帧和所述抽样帧在所述待分类视频中的时间顺序， 对所 述关键帧和所述抽样帧进行合并得到图像帧序列； 第二确定单 元， 用于基于所述图像帧序列确定所述待分类视频的分类结果。 9.一种处理器， 其特征在于， 所述处理器用于运行程序， 其中， 所述程序运行时执行权 利要求1至7中任意 一项所述的视频分类方法。 10.一种电子设备， 其特征在于， 包括一个或多个处理器和存储器， 所述存储器用于存 储一个或多个程序， 其中， 当所述一个或多个程序被所述一个或多个处理器执行时， 使得所 述一个或多个处 理器实现权利要求1至7中任意 一项所述的视频分类方法。权　利　要　求　书 2/2 页 3 CN 115049963 A 3