(19)中华 人民共和国 国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202111672440.8 (22)申请日 2021.12.31 (71)申请人 北京市商汤科技 开发有限公司 地址 100080 北京市海淀区北四环西路58 号11层1101-1117室 申请人 青岛海尔洗涤电器有限公司 (72)发明人 王飞　王磊　王自强　李栋　石均　 曲翔　张祥　 (74)专利代理 机构 北京中知恒瑞知识产权代理 事务所(普通 合伙) 11889 代理人 袁忠林 (51)Int.Cl. G06V 40/10(2022.01) G06V 20/40(2022.01) G06V 10/75(2022.01)G06Q 10/10(2012.01) (54)发明名称 生产过程管理方法、 装置、 设备和存 储介质 (57)摘要 本公开提供了一种生产过程管理方法、 装 置、 设备和存储介质， 其中， 该方法包括： 获取目 标工位的工作人员在生产时的生产动作视频； 对 生产动作视频进行动作识别， 得到工作人员针对 生产动作的动作识别结果； 基于动作识别结果、 以及与目标工位对应的动作模板进行匹配处理， 得到目标工位的工作人员在生产时的动作规范 性信息； 基于动作规范性信息、 以及生产动作视 频， 生成目标工位的生产过程管理数据。 权利要求书3页 说明书19页 附图5页 CN 114332946 A 2022.04.12 CN 114332946 A 1.一种生产过程管理方法， 其特 征在于， 包括： 获取目标工位的工作人员在生产时的生产动作视频； 对所述生产动作视频进行动作识别， 得到所述工作人员针对生产动作的动作识别结 果； 基于所述动作识别结果、 以及与所述目标工位对应的动作模板进行匹配处理， 得到所 述目标工位的工作人员在生产时的动作规范性信息； 基于所述动作规范性信息、 以及所述生产动作视频， 生成所述目标工位的生产过程管 理数据。 2.根据权利要求1所述的生产过程管理方法， 其特征在于， 所述获取目标工位的工作 人 员在生产时的生产动作视频之前， 还 包括： 建立所述目标工位与对所述目标工位进行拍摄的拍摄设备之间的关联关系； 所述获取目标工位的工作人员在生产时的生产动作视频， 包括： 获取与所述目标工位存在所述关联关系的拍摄设备采集的生产动作视频， 并将采集得 到的生产动作视频作为所述目标工位的工作人员在生产时的生产动作视频。 3.根据权利要求2所述的生产过程管理方法， 其特征在于， 所述建立所述目标工位与对 所述目标工位进行拍摄的拍摄设备之间的关联关系， 包括： 获取所述目标工位的工位属性信息； 所述工位属性信息包括下述至少一种： 所述目标 工位所属生产线的生产线标识、 生产线名称、 生产线类型、 生产线管理员信息、 所述目标工 位的工位标识、 用于表征所述 目标工位在生产线中位置的工位位置参数、 用于表征所述 目 标工位对应生产内容的工位职能名称； 基于所述目标工位的工位属性信息， 创建与所述目标工位对应的工位实例； 响应于对所述工位实例的设备添加操作， 将所述设备添加操作对应的拍摄设备的设备 属性信息添加至所述工位属性信息中， 以建立所述目标工位和所述拍摄设备之 间的关联关 系； 所述设备属性信 息包括下述至少一种： 所述拍摄设备的名称、 所述拍摄设备的标识、 所 述拍摄设备的互联网协议 IP地址。 4.根据权利要求1至3任一项所述的生产过程管理方法， 其特征在于， 所述匹配处理， 包 括下述至少一种： 工作时长匹配、 生产规范性匹配、 生产效率匹配。 5.根据权利要求4所述的生产过程管理方法， 其特征在于， 基于所述动作识别结果、 以 及与所述 目标工位对应的动作模板进行工作时长匹配处理， 得到所述动作规范性信息， 包 括： 确定所述动作识别结果对应的识别动作时长； 将所述识别动作时长、 和所述动作模板对应的参考动作时长进行匹配， 得到所述工作 时长的规范性信息 。 6.根据权利要求4或5所述的生产 过程管理方法， 其特征在于， 所述动作识别结果包括： 识别动作序列； 所述识别动作序列包括： 执行一个生产动作时所做的多个识别子动作； 所述 动作模板包括： 与所述目标工位对应的参考动作序列； 所述参考动作序列包括： 执行一个生 产动作时需要做的多个参 考子动作； 基于所述动作识别结果、 以及与 所述目标工位对应的动作模板进行生产规范性匹配处权　利　要　求　书 1/3 页 2 CN 114332946 A 2理， 包括： 将所述识别动作序列中的识别子动作和所述参考动作序列中的参考子动作进行动作 类型匹配， 得到与所述动作类型相关的、 用于反映生产动作规范性的规范性信息； 和/或 将所述识别动作序列中的识别子动作和所述参考动作序列中的参考子动作进行动作 顺序匹配， 得到与所述动作顺序相关的、 用于反映生产动作规范性的规范性信息 。 7.根据权利要求4至6任一项所述的生产过程管理方法， 其特征在于， 基于所述动作识 别结果、 以及与所述目标工位对应的动作模板进行生产效率匹配处 理， 包括： 基于所述动作识别结果， 获取所述工作 人员执行所述生产动作的总时长和间隔时长中 的至少一项； 基于获取的所述工作人员执行生产动作的总时长和/或间隔时长中的至少一项， 得到 所述工作人员的工作效率信息； 基于所述工作人员的工作效率信息、 以及基于所述动作模板确定的预设工作效率信 息， 得到所述 生产效率的规范性信息 。 8.根据权利要求1至7任一项所述的生产过程管理方法， 其特征在于， 所述动作识别结 果包括： 至少一个生产动作分别对应的识别动作序列； 所述识别动作序列包括： 执行一个所 述生产动作时所做的多个识别子动作； 所述动作规范性信息包括： 所述至少一个生产动作 分别对应的动作规范性信息； 所述基于所述动作规范性信息、 以及所述生产动作视频， 生成所述目标工位的生产过 程管理数据， 包括： 基于所述动作识别结果、 以及所述生产动作视频中各个图像对应的时间戳， 将所述生 产动作视频切分为与每 个生产动作对应的子 视频； 针对所述每个生产动作对应的子视频， 基于所述子视频、 以及所述生产动作对应的动 作规范性信息， 生成所述 生产动作对应的生产过程数据； 基于得到的所述至少一个生产动作分别对应的生产过程数据， 生成所述目标工位的生 产过程管理数据。 9.根据权利要求1至8任一项所述的生产过程管理方法， 其特 征在于， 所述方法还 包括： 基于所述目标工位对应的预设存储路径， 将所述生产过程管理数据存储至与 所述预设 存储路径对应的存 储空间。 10.根据权利要求9所述的方法， 其特 征在于， 所述方法还 包括： 响应于对所述目标工位的信息查看操作， 基于所述目标工位对应的预设存储路径， 从 所述存储空间中读取并展示所述 生产过程管理数据。 11.一种生产过程管理装置， 其特 征在于， 包括： 视频获取模块， 用于获取目标工位的工作人员在生产时的生产动作视频； 动作识别模块， 用于对所述生产动作视频进行动作识别， 得到所述工作人员 针对生产 动作的动作识别结果； 信息确定模块， 用于基于所述动作识别结果、 以及与所述目标工位对应的动作模板， 得 到所述目标工位的工作人员在生产时的动作规范性信息； 数据生成模块， 用于基于所述动作规范性信 息、 以及所述生产动作视频， 生成所述目标 工位的生产过程管理数据。权　利　要　求　书 2/3 页 3 CN 114332946 A 3