(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202211010884.X (22)申请日 2022.08.23 (71)申请人 福州大学 地址 350108 福建省福州市闽侯县福州大 学城乌龙江北 大道2号福州大 学 (72)发明人 江灏　童艺璇　陈静　缪希仁　 (74)专利代理 机构 福州元创专利商标代理有限 公司 35100 专利代理师 陈明鑫　蔡学俊 (51)Int.Cl. G06V 10/762(2022.01) G06V 40/20(2022.01) H04L 1/06(2006.01) H04N 5/225(2006.01) H04N 7/18(2006.01)H04W 4/38(2018.01) H04W 24/08(2009.01) (54)发明名称 一种基于无线信道信息的居家连续行为辨 识方法及系统 (57)摘要 本发明涉及一种基于无线信道信息的居家 连续行为辨识方法及系统。 通过WiFi探测器对各 居家连续行为进行信道状态信息采集， 利用摄像 机同步获取对应行为的二维人体骨骼坐标标签； 并利用分割算法分割连续行为， 将分割后的CSI 数据处理为频谱图， 利用深度学习模型建立CSI 与行为骨骼关节点之间的映射关系， 进行骨骼关 节点坐标预测， 并利用聚类算法完善骨骼图。 本 发明， 使用WiFi探测器获取居家连续行为的CSI 数据， 将分割后的CSI数据处理为频谱图， 能够深 入挖掘CSI的数据特征； 利用深度学习模型将CSI 数据映射到对应的行为骨骼关节 点， 最后用聚类 算法完善骨骼图。 以骨骼图的形式呈现居家连续 行为， 既保护了居住者的隐私， 又能直观的看出 包括肢体动作在内的居家活动。 权利要求书2页 说明书3页 附图2页 CN 115410018 A 2022.11.29 CN 115410018 A 1.一种基于无线信道信息的居家连续行为辨识方法， 其特征在于， 通过WiFi探测器对 各居家连续行为进行信道状态信息采集， 利用摄像机同步获取对应行为的二 维人体骨骼 坐 标标签； 并利用分割算法分割居家连续行为， 将分割后得到的CSI数据处理为频谱图， 利用 深度学习模型建立CSI与行为骨骼关节点之间的映射关系， 进 行骨骼关节点坐标预测， 并利 用聚类算法完 善骨骼图。 2.根据权利要求1所述的一种基于无线信道信息的居家连续行为辨识方法， 其特征在 于， 所述通过WiFi探测器对各居家连续行为进行信道状态信息采集， 即通过部署多个WiFi 探测器， 从而获取 各居家连续行为下的CSI数据， 并存进数据库。 3.根据权利要求1所述的一种基于无线信道信息的居家连续行为辨识方法， 其特征在 于， 所述利用摄像机同步获取对应行为的二维人体骨骼坐标标签， 即利用摄像机获取二维 骨骼坐标数据(xi,yi)， 对二维骨骼坐标数据进行连续行为骨骼关键点数据分析， 筛选关键 的骨骼关节点， 并处 理骨骼关节点 坐标数据中的缺失值。 4.根据权利要求3所述的一种基于无线信道信息的居家连续行为辨识方法， 其特征在 于， 获取二维骨骼坐标 数据的数据方法包括但不限于Open  Pose、 Alpha  Pose。 5.根据权利要求2所述的一种基于无线信道信息的居家连续行为辨识方法， 其特征在 于， 所述利用分割算法分割居家连续行为， 即利用分割算法基于获取的CSI数据 找到居家连 续行为的起止时间点， 分割居家连续行为。 6.根据权利要求1所述的一种基于无线信道信息的居家连续行为辨识方法， 其特征在 于， 所述将分割后得到的CSI数据处理为频谱图， 即将居家连续行为分割后得到的行为片段 对应的CSI数据处 理为频谱图， 每 个频谱图都包 含有关行为类型以及居家人员的位置信息 。 7.根据权利要求1所述的一种基于无线信道信息的居家连续行为辨识方法， 其特征在 于， 所述利用深度学习模型建立CSI与行为骨骼关节 点之间的映射关系， 进 行骨骼关节 点坐 标预测， 并利用聚类算法完 善骨骼图的具体实现方式为： 利用CSI集成频谱图和二维骨骼坐标数据， 将CSI映射到对应的居家连续行为， 以预测 行为骨骼关节点坐标； 其中目标函数是最小化每个关节点的预测坐标与对应的注释之 间的 欧几里得距离误差： 其中m表示有m个关键骨 骼关节点， n表示第n个关节点， (Xrn、 Yrn)表示真实骨骼关节点坐 标， (Xpn、 Ypn)表示预测骨骼关节点 坐标； 并采用聚类算法完善骨骼图， 通过聚类算法剔除离群点， 最终得到居家连续行为识别 结果。 8.一种基于无线信道信息的居家连续行为 辨识系统， 其特 征在于， 包括： 多个WiFi探测器， 所述WiFi探测器包括但不限于路由器和各种CSI传感器， 所述WiFi探 测器用于对各居家连续行为进 行信道状态信息采集， 获取各居家连续行为下的CSI数据， 并 存进数据库； 一个摄像机， 所述摄像机包括但不限于监控摄像头、 Kinect， 所述摄像机与WiFi探测器 同步以获取对应行为的二维人体骨骼坐标 标签；权　利　要　求　书 1/2 页 2 CN 115410018 A 2一个服务器， 用于进行居家连续行为的分割， 并将分割后得到的CSI数据处理为频谱 图， 利用深度学习模型建立CSI与行为骨骼关节点之间的映射关系， 进 行骨骼关节点坐标预 测， 并利用聚类算法完 善骨骼图； 一个用于存 储CSI数据的数据库。权　利　要　求　书 2/2 页 3 CN 115410018 A 3