基于监控画面的寄件行为识别分析系统、方法、设备及存储介质与流程

专利2026-10-04  3


本发明涉及图像识别系统,具体涉及基于监控画面的寄件行为识别分析系统、方法、设备及存储介质。


背景技术:

1、基于监控画面的寄件行为识别分析系统是一种利用现代计算机视觉技术和人工智能算法对监控摄像头拍摄的画面进行智能分析,以识别和分析寄件行为的系统。该系统主要依托于深度学习算法,通过对大量寄件行为视频数据的训练,实现对寄件行为的自动识别与分析。

2、现有的寄件行为识别分析系统一般应用在快递站、快递驿站等寄件站点,而随着快递柜的投入,使得寄件点不再受限于门面地理位置、空间大小以及开放时间,有效提升了寄件的便利性,同时,现有的寄件站点目前需要由人员的对接,以确定来人是寄件还是来取件的,并且现有技术中的快递柜缺少相应的寄件行为识别分析系统,虽然都配备有监控摄像头,但该监控摄像头一般只用于记录寄件行为防止了包裹丢失或错领,难以根据用户寄件行为规律及监控图像为用户调整操作界面,且难以主动为用户推荐合适的柜口,影响寄件效率,用户体验不佳,存在一定缺陷。


技术实现思路

1、针对现有技术所存在的上述缺点,本发明提供了基于监控画面的寄件行为识别分析系统、方法、设备及存储介质,能够有效解决现有技术中的快递柜难以主动为用户调整操作界面以及推荐合适的柜口的问题。

2、为实现以上目的,本发明通过以下技术方案予以实现:

3、本发明提供基于监控画面的寄件行为识别分析系统,至少包括多个快递柜,所述快递柜上设置有多个用于寄件、收件的格口,每个所述格口均设置有电控柜门,所述快递柜设有监控摄像头,所述快递柜位于监控摄像头下方设有用于录入信息及控制电控柜门开合的触控面板,还包括:数据同步模块、监控识别模块、柜口推荐模块、信息分析模块;

4、将快递柜内待用户签收取走的快递包裹记作收件包裹,将快递柜内待快递员揽收寄出的快递包裹记作寄件包裹,数据同步模块获取收件包裹、寄件包裹的收件人、寄件人信息,在用户输入收件人信息后,控制对应收件包裹所在格口的电控柜门打开,在用户输入寄件人信息和收件人后,由用户选择其中一个格口并控制电控柜门打开,数据同步模块将所有收件人和寄件人信息同步上传至数据库;

5、监控识别模块包括用户识别单元和物件识别单元,用户识别单元识别进入监控范围内人员的人体轮廓及人脸数据并进行分析,将其标记为待定用户,将停留超过设定时间的待定用户标记为目标用户,物件识别单元对目标用户手持物体进行分析,将其标记为寄件用户或收件用户,并在触控面板上推荐显示相应的寄件界面或收件界面;

6、柜口推荐模块对监控画面中的人体轮廓进行进一步分析,为目标用户推荐合适的格口;

7、信息分析模块对每个用户的收件人以及寄件人信息进行分析,根据每个用户的收件、寄件规律在识别到该用户人脸时为其推荐显示相应的寄件界面或收件界面。

8、进一步地,所述用户识别单元包括可以识别监控视频中人体轮廓的人体轮廓识别模型,通过人体轮廓识别模型对监控画面中的人体轮廓进行识别并记作目标轮廓,对目标轮廓的头部区域进行人脸识别获取人脸数据,将同一人脸数据及其对应的目标轮廓记作待定用户;

9、获取监控画面中的待定用户的人脸面积占比值以及对应目标轮廓面积占比值,分别设定一个人脸占比阈值和一个轮廓占比阈值,当人脸面积占比值、目标轮廓面积占比值均大于等于对应的人脸占比阈值、轮廓占比阈值时,对监控画面进行定期截取,监控画面中设置有定高标线,定高标线对应高度为0.6m,将定期截取的监控画面瞬时图像的定高标线以下部分记作截取图像,对截取图像进行相似度比较,当存在连续多张截取图像之间相似度大于预设的相似度阈值时,将待定用户标记为目标用户。

10、进一步地,所述物件识别单元对目标用户的分析推荐过程具体如下:

11、在目标用户的监控画面截取判断过程中实时获取目标用户的人体轮廓面积值,并绘制人体轮廓面积值随时间变化折线图,选取折线图中人体轮廓面积值最大值对应的瞬时图像作为目标图像,获取目标图像中的人体轮廓和人脸数据,获取人脸数据中的两个眼部轮廓,以两个眼部轮廓相邻侧最接近的两点建立眼距线段,构建经过眼距线段中点的垂直于水平面的直线记作轮廓平分线,以轮廓平分线将目标用户的人体轮廓分为两个部分分别记作,计算两个部分之间的面积差绝对值并除以中的较小值得到面积差比,计算公式为,其中表示中的较小值,预设有面积差阈值,当两个部分之间的面积差比小于等于面积差阈值时,将该目标用户记作收件用户,反之,则将其记作寄件用户;

12、当目标用户为寄件用户时,将触控面板一级界面调整为寄件界面,当目标用户为收件用户时,将触控面板一级界面调整为收件界面。

13、进一步地,所述柜口推荐模块分析过程具体如下:

14、根据目标用户最终选择操作的界面将当前行为记作寄件行为或收件行为,当目标用户当前行为记作寄件行为时,获取目标用户两个部分之间的面积差绝对值记作,代入公式中进行计算得到第一限制值;

15、柜口推荐模块位于快递柜两侧设置有用于捕捉目标用户侧面图像的辅助摄像头,在用户当前行为被标记为寄件行为时,捕捉目标用户侧面图像并记作侧面图,获取侧面图中目标用户的人体轮廓高度最大值记作h,绘制侧面图中目标用户的人体轮廓水平宽度w随竖直高度的变化曲线图,获取高度区间范围[0.4h,0.7h]内的水平宽度w的最大值记作第二限制值;

16、获取目标用户选择的格口的长度、宽度、高度,分别记作,选择中的最小值与第一限制值和第二限制值中的最小值进行比较,选择中的最大值与第一限制值和第二限制值中的最大值进行比较,当≤或者≤时,生成选择格口大小不合适指令,提示目标用户选择更大的格口,并为目标用户推荐≥且≥的格口。

17、进一步地,所述信息分析模块推荐过程具体如下:

18、为每个独特的人脸数据赋予一个用户标号,获取寄件行为对应寄件包裹的寄件人信息并与对应的人脸数据进行绑定,获取收件行为对应收件包裹的收件人信息并与对应的人脸数据进行绑定,每个用户标号均对应有多个寄件人信息、多个收件人信息,多个寄件人信息以及多个收件人信息共同构成对应用户标号的信息数据集,当同一个用户标号的信息数据集内仅包含寄件人信息时将该用户标号记作寄件标号,同样的,当同一个用户标号的信息数据集内仅包含收件人信息时将该用户标号记作收件标号;

19、当寄件标号的人脸数据与目标用户的人脸数据相同时,将目标用户为寄件用户时,同时将触控面板一级界面调整为寄件界面,当收件标号的人脸数据与目标用户的人脸数据相同时,将目标用户为收件用户时,同时将触控面板一级界面调整为收件界面。

20、进一步地,本发明还提供基于监控画面的寄件行为识别分析方法,应用于所述的基于监控画面的寄件行为识别分析系统,运行步骤具体如下:

21、步骤一:监控识别模块包括用户识别单元和物件识别单元,用户识别单元对进入监控范围内的人员进行图像分析,将其标记为待定用户,将停留超过设定时间的待定用户标记为目标用户;

22、步骤二:物件识别单元对目标用户的人体轮廓进行分析,判断目标用户是否持有物体并将其标记为寄件用户或收件用户,并在触控面板上推荐显示相应的寄件界面或收件界面;

23、步骤三:数据同步模块提取收件包裹或寄件包裹的收件人以及寄件人信息并上传至数据库,监控识别模块获取对应收件人和寄件人的人脸数据,收件人和寄件人统称为使用用户;

24、步骤四:信息分析模块将收件包裹或寄件包裹的收件人以及寄件人信息与对应使用用户的人脸数据进行绑定,并为每个人脸数据赋予一个用户标号,每个用户标号的多个寄件人信息以及多个收件人信息共同构成对应用户标号的信息数据集,当同一个用户标号的信息数据集内仅包含寄件人信息时将该用户标号记作寄件标号,当同一个用户标号的信息数据集内仅包含收件人信息时将该用户标号记作收件标号;

25、步骤五:当寄件标号的人脸数据与目标用户的人脸数据相同时,将目标用户为寄件用户时,同时将触控面板一级界面调整为寄件界面,当收件标号的人脸数据与目标用户的人脸数据相同时,将目标用户为收件用户时,同时将触控面板一级界面调整为收件界面。

26、本发明还提供基于监控画面的寄件行为识别分析设备,包括处理器,还包括存储器、通信总线、用户接口及网络接口,通信总线用于实现这些组件之间的连接通信,用户接口与触控面板连接,网络接口包括有线接口和无线接口,存储器包括随机存取存储器和非易失性存储器,存储器上存储有计算机程序,计算机程序被处理器执行时实现上述的基于监控画面的寄件行为识别分析方法。

27、本发明还提供一种计算机可读存储介质,存储有计算机程序,计算机程序被处理器执行时实现上述基于监控画面的寄件行为识别分析方法。

28、本发明提供的技术方案,与已知的现有技术相比,具有如下有益效果:

29、1、本发明数据同步模块能够及时同步上传用户的收件人和寄件人信息,监控识别模块能够从待定用户中区分出目标用户,通过从所有进入监控范围内的用户中筛选出停留在快递柜前的用户,进而对其进行进一步的行为分析,剔除掉监控画面中所路过不进行寄件、收件操作的路人用户,省略后续分析步骤,通过对监控画面中人体轮廓两侧对称程度进行分析,判断用户是否手持物品,从而判定用户寄件或取件意图,为用户推荐相应界面,有效提升用户的使用体验,减少用户的多余操作,优化使用流程,同时本快递柜也可以应用到快递站点内,这样也能够在一定程度上减少人工,实现自动取快、寄快递。

30、2、本发明柜口推荐模块能够进一步根据用户手持物体的画面大小来初步计算物体的体积参数,从而为目标用户推荐格口能够帮助目标用户选择合适且能够容纳下寄件包裹的格口,减少目标用户选择格口过程中的试错时间,提升目标用户的寄件体验,优化目标用户的寄件效率。

31、3、本发明信息分析模块对每个用户的收件人以及寄件人信息进行分析,根据每个用户的收件、寄件规律在每个目标用户准备进行快递柜操作前,通过人脸识别技术区分目标用户,并根据该目标用户的寄、收件习惯为其提前准备,智能区分所显示的一级界面,以便于目标用户的操作,从而进一步提升用户的使用体验。


技术特征:

1.基于监控画面的寄件行为识别分析系统,包括,多个快递柜,所述快递柜上设置有多个用于寄件、收件的格口,每个所述格口均设置有电控柜门,所述快递柜设有监控摄像头,所述快递柜位于监控摄像头下方设有用于录入信息及控制电控柜门开合的触控面板,其特征在于,还包括:数据同步模块、监控识别模块、柜口推荐模块、信息分析模块;

2.根据权利要求1所述的基于监控画面的寄件行为识别分析系统,其特征在于,所述用户识别单元包括用于识别监控视频中人体轮廓的人体轮廓识别模型,通过人体轮廓识别模型对监控画面中的人体轮廓进行识别并记作目标轮廓,对目标轮廓的头部区域进行人脸识别获取人脸数据,将同一人脸数据及其对应的目标轮廓记作待定用户;

3.根据权利要求2所述的基于监控画面的寄件行为识别分析系统,其特征在于,所述物件识别单元对目标用户的分析推荐过程具体如下:

4.根据权利要求3所述的基于监控画面的寄件行为识别分析系统,其特征在于,所述柜口推荐模块分析过程具体如下:

5.根据权利要求4所述的基于监控画面的寄件行为识别分析系统,其特征在于,所述信息分析模块推荐过程具体如下:

6.基于监控画面的寄件行为识别分析方法,其特征在于,应用于权利要求1所述的基于监控画面的寄件行为识别分析系统,运行步骤具体如下:

7.基于监控画面的寄件行为识别分析设备,其特征在于,包括处理器,还包括存储器、通信总线、用户接口及网络接口,通信总线用于实现这些组件之间的连接通信,用户接口与触控面板连接,网络接口包括有线接口和无线接口,存储器包括随机存取存储器和非易失性存储器,所述存储器上存储有计算机程序,计算机程序被处理器执行时实现权利要求6所述的基于监控画面的寄件行为识别分析方法。

8.一种计算机可读存储介质,其特征在于,其上存储有计算机程序,计算机程序被处理器执行时实现权利要求6所述的基于监控画面的寄件行为识别分析方法。


技术总结
本发明涉及图像识别系统技术领域,具体涉及基于监控画面的寄件行为识别分析系统、方法、设备及存储介质。包括多个快递柜,快递柜上设置有多个用于寄件、收件的格口,每个格口均设置有电控柜门,快递柜设有监控摄像头,快递柜位于监控摄像头下方设有用于录入信息及控制电控柜门开合的触控面板,还包括数据同步模块、柜口推荐模块、信息分析模块。本发明通过对监控画面中人体轮廓两侧对称程度进行分析,判断用户是否手持物品,从而判定用户寄件或取件意图,为用户推荐相应界面,有效提升用户的使用体验,减少用户的多余操作,优化使用流程,同时本快递柜也可以应用到快递站点内使用,能够在一定程度上减少人工,实现自动取快、寄快递。

技术研发人员:李栋,姜雪平,唐烈峰,诸一吟,庄超,陈佳辉,韩林侃,郭奇伟,翁志凡
受保护的技术使用者:浙江海数科技有限公司
技术研发日:
技术公布日:2024/11/11
转载请注明原文地址: https://tieba.8miu.com/read-25193.html

最新回复(0)