(19)国家知识产权局 (12)发明 专利 (10)授权公告 号 (45)授权公告日 (21)申请 号 202210401166.9 (22)申请日 2022.04.18 (65)同一申请的已公布的文献号 申请公布号 CN 114511821 A (43)申请公布日 2022.05.17 (73)专利权人 深圳市爱深盈通信息技 术有限公 司 地址 518000 广东省深圳市南 山区西丽 街 道曙光社区TCL国际E城G3 栋1001 (72)发明人 肖海云　周有喜　 (74)专利代理 机构 深圳市道臻知识产权代理有 限公司 4 4360 专利代理师 陈琳 (51)Int.Cl. G06V 20/52(2022.01)G06V 10/28(2022.01) G06V 10/44(2022.01) G06V 10/764(2022.01) G06V 10/82(2022.01) G06K 9/62(2022.01) G06N 3/04(2006.01) G06N 3/08(2006.01) (56)对比文件 WO 2018148 896 A1,2018.08.23 CN 108875562 A,2018.1 1.23 Saddam Hussain Khan et al. .passenger detection and counti ng for publ ic transport system. 《NED Un iversity Journal of Researc h》 .2020, 审查员 曹春晓 (54)发明名称 一种上下车人数统计方法、 系统、 计算机设 备和存储介质 (57)摘要 本发明实施例公开了一种上下车人数统计 方法、 系统、 计算机设备和存储介质。 上下车人数 统计方法包括： 获取当前RGB图像和当前红外图 像； 判断拍摄当前RGB图像的拍摄光线强度是否 大于预设强度阈值； 若是， 则将当前 RGB图像和当 前红外图像进行对比， 获取当前乘 客位置和当前 乘客数量； 若否， 则获取当前红外图像相邻至少 一帧的相邻红外图像， 根据当前红外图像和相邻 红外图像获取当前乘客位置和当前乘 客数量； 获 取每个乘 客的移动趋势和乘客数量变化值， 根据 每个乘客的移动趋势和乘客数量变化值获取上 下车人数。 本发 明能够有效提升上下车人数统计 的准确性和可靠性。 权利要求书2页 说明书8页 附图2页 CN 114511821 B 2022.07.26 CN 114511821 B 1.一种上下车人数统计方法， 其特征在于， 应用于拍摄系统， 所述拍摄系统包括RGB摄 像装置和红外摄像装置； 所述上下车人数统计方法包括如下步骤： 当车辆处于停靠站位置 时， 检测到车门有乘 客经过时按照预设拍摄时间节点进 行拍摄， 获取当前RGB图像和当前 红 外图像； 判断拍摄所述当前RGB图像的拍摄光线强度是否大于预设强度阈值； 若 所述拍摄光 线强度大于所述预设强度阈值， 则获取所述 RGB摄像装置和所述红外摄像装置的安装参数， 所述安装参数包括所述RGB摄像装置和所述红外摄像装置之间的水平距离和所述RGB摄像 装置和所述红外摄像装置的垂 直高度， 将所述当前RGB图像和所述当前 红外图像进 行对比， 获取当前乘客位置和当前乘客数量基于所述安装参数对所述当前乘客位置进 行双目测距， 获取所述当前乘客位置的乘客身高， 若所述乘客身高满足预设身高范围， 则 保留所述当前 乘客位置； 若所述拍摄光线强度小于或等于所述预设强度阈值， 则获取所述当前红外图像 相邻至少一帧的相邻红外图像， 对当前红外图像和相邻红外图像进行二值化处理， 获取当 前二值化图像和相邻二值化图像； 将所述当前二值化图像和所述相邻二值化图像通过帧差 法进行比对获取差异图像区域， 获取所述差异图像区域在所述相 邻红外图像中对应位置的 待检测图像； 对所述待检测图像进行霍夫曼圆形检测， 根据检测到的圆形区域获取所述当 前乘客位置和所述当前乘客数量； 根据所述车辆处于停靠站位置时获取的多张所述当前 RGB图像和所述当前红外图像获取每个乘客的移动趋势和乘客数量变化值， 根据每个乘客 的所述移动趋势和所述乘客数量变化 值获取上下车人数。 2.根据权利要求1所述的上下车人数统计方法， 其特征在于， 所述将所述当前RGB图像 和所述当前 红外图像进 行对比的步骤之前， 包括： 根据所述安装参数对 所述当前RGB图像和 所述当前红外图像进行图像校正， 使得所述当前RGB图像和所述当前红外图像中的每个像 素点均一 一对应。 3.根据权利要求1所述的上下车人数统计方法， 其特征在于， 所述相邻红外图像为所述 当前红外图像之前至少一帧的图像； 所述根据所述当前红外图像和所述相 邻红外图像获取 所述当前乘客位置和所述当前乘客数量的步骤， 包括： 通过卡尔曼滤波处理所述相邻二值 化图像， 获取乘客预测位置， 获取所述当前二值化图像中的乘客检测位置， 对所述乘客预测 位置和所述乘客检测 位置做交并比运算， 当交并比运算的结果满足预设要求时， 根据所述 乘客预测位置和所述乘客检测位置获取 所述当前乘客 位置和所述当前乘客数量。 4.根据权利要求1所述的上下车人数统计方法， 其特征在于， 所述将所述当前RGB图像 和所述当前红外图像进 行对比， 获取当前乘客位置和当前乘 客数量的步骤， 包括： 获取所述 当前RGB图像中的RGB乘客图像区域， 获取所述当前红外图像中对应于所述RGB乘客图像区 域的图像位置的当前映射区域， 若当前映射区域包括圆形热点， 则表示所述当前映射区域 对应一个乘客； 根据包括圆形热点的所述当前映射区域的位置和数量获取所述当前乘客位 置和所述当前乘客数量。 5.根据权利要求1所述的上下车人数统计方法， 其特征在于， 所述将所述当前RGB图像 和所述当前红外图像进 行对比， 获取当前乘客位置和当前乘 客数量的步骤， 包括： 获取训练 图像集， 所述训练图像集包括多个训练图像组和每个所述训练图像组对应的乘客位置和/ 或乘客数量， 每个所述训练图像组包括训练RGB图像和所述训练RGB图像对应的训练红外图 像； 通过所述训练 图像集对神经网络进行训练， 获取预训练的神经网络； 将所述当前RGB图 像和所述当前 红外图像输入所述预训练的神经网络， 获取所述当前乘客位置和所述当前乘权　利　要　求　书 1/2 页 2 CN 114511821 B 2客数量。 6.一种上下车人数统计系统， 其特征在于， 应用于拍摄系统， 所述拍摄系统包括RGB摄 像装置和红外摄像装置； 包括如下模块： 获取模块， 用于当车辆处于停靠站位置时， 检测到 车门有乘 客经过时按照预设拍摄时间节点进 行拍摄， 获取当前RGB图像和当前 红外图像； 判 断模块， 用于判断拍摄所述当前RGB图像的拍摄光线强度是否大于预设强度阈值； 对比模 块， 用于若 所述拍摄光线强度大于所述预设强度阈值， 则获取所述 RGB摄像装置和所述红外 摄像装置的安装参数， 所述安装参数包括所述RGB摄像装置和所述红外摄像装置之间的水 平距离和所述 RGB摄像装置和所述红外摄像装置的垂 直高度， 将所述当前RGB图像和所述当 前红外图像进行对比， 获取当前乘客位置和当前乘客数量； 基于所述安装参数对所述当前 乘客位置进行双目测距， 获取所述当前乘客位置的乘客身高， 若所述乘客身高满足预设身 高范围， 则保留所述当前乘客位置； 检测模块， 用于若 所述拍摄光线强度小于或等于所述预 设强度阈值， 则获取所述当前红外图像相邻至少一帧的相邻红外图像， 对当前红外图像和 相邻红外图像进行二值化处理， 获取当前二值化图像和相邻二值化图像； 将所述当前二值 化图像和所述相 邻二值化图像通过帧差法进 行比对获取差异图像区域， 获取所述差异图像 区域在所述相 邻红外图像中对应位置的待检测图像； 对所述待检测图像进 行霍夫曼圆形检 测， 根据检测到的圆形区域 获取所述当前乘客位置和所述当前乘客数量； 人数模块， 用于根 据所述车辆处于停靠站 位置时获取的多张所述当前RGB图像和所述当前 红外图像获取每个 乘客的移动趋势和乘 客数量变化值， 根据每个乘 客的所述移动趋势和所述乘客数量变化值 获取上下车人数。 7.一种存储介质， 存储有计算机程序， 所述计算机程序被处理器执行时， 使得所述处理 器执行如权利要求1至 5中任一项所述方法的步骤。 8.一种计算机设备， 包括存储器和处理器， 所述存储器存储有计算机程序， 所述计算机 程序被所述处理器执行时， 使得所述处理器执行如权利要求1至5中任一项所述方法的步 骤。权　利　要　求　书 2/2 页 3 CN 114511821 B 3