(19)国家知识产权局 (12)发明 专利 (10)授权公告 号 (45)授权公告日 (21)申请 号 202210284918.8 (22)申请日 2022.03.23 (65)同一申请的已公布的文献号 申请公布号 CN 114385663 A (43)申请公布日 2022.04.22 (73)专利权人 北京国联政信科技有限公司 地址 100071 北京市丰台区南四环西路18 8 号七区29号楼1至4层101内3层301- 303室 (72)发明人 徐玉峰　 (74)专利代理 机构 北京细软智谷知识产权代理 有限责任公司 1 1471 专利代理师 赵越 (51)Int.Cl. G06F 16/23(2019.01)G06F 16/242(2019.01) G06F 16/2458(2019.01) (56)对比文件 WO 2017045438 A1,2017.0 3.23 US 2009216709 A1,20 09.08.27 CN 104361022 A,2015.02.18 CN 107247 777 A,2017.10.13 CN 104331492 A,2015.02.04 CN 111858710 A,2020.10.3 0 CN 111858710 A,2020.10.3 0 CN 10846 0041 A,2018.08.28 审查员 解欣 (54)发明名称 数据处理的方法和装置 (57)摘要 本申请涉及一种数据处理的方法和装置， 包 括： 根据预设的定时程序， 自动执行数据统计任 务， 获得统计结果； 根据预设的页面模板， 将所述 统计结果进行序列化处理， 获得结果数据； 将所 述结果数据存入缓存数据库； 在接收到查看请求 时， 先查询缓存 数据库中是否存在与所述查看请 求相匹配的结果数据； 如果存在， 则将对应的结 果数据响应到请求端； 如果不存在， 则将查看请 求放入待处理队列。 本申请的方案能够根据需求 从海量数据中提取有效数据， 在数据分析过程避 免了垃圾数据和无效数据， 因而对 数据分析效率 有极大的提升； 采用统一的页面模板， 便于观察 数据结果； 在服务端将不同格式的数据进行序列 化， 方便在开发时接口对接， 提高工作效率。 权利要求书2页 说明书8页 附图2页 CN 114385663 B 2022.06.28 CN 114385663 B 1.一种数据处 理的方法， 其特 征在于， 包括： 根据预设的定时程序， 自动执 行数据统计任务， 获得统计结果； 根据预设的页面模板， 将所述统计结果进行序列化处 理， 获得结果数据； 将所述结果数据存 入缓存数据库； 在接收到查看请求 时， 先查询缓存数据库中是否存在与 所述查看请求相匹配的结果数 据； 如果存在， 则将对应的结果数据响应到请求端； 如果不存在， 则将查看请求放入待处理 队列； 其中， 所述执 行数据统计任务的步骤 包括： 构建需要查询的条件 对象； 与历史数据库建立连接， 根据条件 对象到历史数据库中不同的数据表中读取 数据； 根据需要 展示的数据维度， 对读取到的数据进行解析， 获得统计结果。 2.根据权利要求1所述的方法， 其特 征在于， 所述读取 数据的步骤 包括： 创建多个线程， 使 多个数据读取任务同时进行； 在执行任务前确定： 待处 理任务的总数、 每 个待处理任务的识别标志； 依次将不同待处 理任务的识别标志分配到各个线程； 每个线程根据分配的识别标志执 行数据读取任务； 每个线程处 理完一个数据读取任务， 会将公共已处 理数据+1； 当公共已处 理数据等于待处 理任务的总数时， 所有数据均处 理完成。 3.根据权利要求1所述的方法， 其特 征在于， 将所述统计结果进行序列化处 理， 包括： 根据页面展示的格式， 将所述统计结果进行jso n序列化。 4.根据权利要求1 ‑3任一项所述的方法， 其特 征在于， 所述 查看请求中包 含数据条件； 所述查看缓存数据库中是否存在与所述 查看请求相匹配的结果数据， 包括： 根据预设规则将数据条件生成唯一标识； 查看缓存数据库中是否存在相同的键值； 如果存在， 则该键值对应的数据为与所述 查看请求相匹配的结果数据。 5.根据权利要求 4所述的方法， 其特 征在于， 还 包括： 如果存在， 则直接获取结果数据， 将该数据响应给展示层； 并更新该数据的活跃度指 标， 保存在缓存数据库中。 6.根据权利要求 4所述的方法， 其特 征在于， 所述将查看请求 放入待处 理队列， 包括： 将唯一标识存 入待处理队列中， 等待队列消费； 监听待处 理队列， 当发现待处 理队列中有任务时， 消费队列中的任务； 将待处理队列中的唯一标识取 出； 根据唯一标识将对应的数据查出。 7.根据权利要求4所述的方法， 其特征在于， 所述将所述结果数据存入缓存数据库， 包 括： 将当前时间、 结果数据和唯一标识， 保存到缓存数据库中。 8.根据权利要求 4所述的方法， 其特 征在于， 还 包括： 设置定时程序， 在缓存数据库中查询最后更新时间在预设时间阈值内的数据， 并对这权　利　要　求　书 1/2 页 2 CN 114385663 B 2些数据进行 更新； 将最后更新时间超出 预设时间阈值的数据丢弃。 9.一种数据处 理的装置， 其特 征在于， 包括： 定时程序模块， 用于根据预设的定时程序， 自动执 行数据统计任务， 获得统计结果； 序列化模块， 用于根据 预设的页面模板， 将所述统计结果进行序列化处理， 获得结果数 据； 并将所述结果数据存 入缓存数据库； 查询模块， 用于在接收到查看请求时， 先查询缓存数据库中是否存在与所述查看请求 相匹配的结果数据； 如果存在， 则将对应的结果数据响应到请求端； 如果不存在， 则将查看 请求放入待处 理队列； 其中， 所述定时程序模块执行数据统计任务的步骤包括： 构建需要查询的条件对象； 与 历史数据库建立连接， 根据条件对 象到历史数据库中不同的数据表中读取数据； 根据需要 展示的数据维度， 对读取到的数据进行解析， 获得统计结果。权　利　要　求　书 2/2 页 3 CN 114385663 B 3