公开(公告)号：CN115017217A

公开(公告)日：2022-09-06

申请号：CN202210566652.6

申请日：2022-05-23

Applicant: 北京计算机技术及应用研究所

Inventor： 徐星旺 ,  余增文 ,  高峰 ,  彭谭 ,  韩翠红

IPC: G06F16/25 ,  G06F16/27 ,  G06F16/29

Abstract: 本发明涉及一种流式地理轨迹数据的治理方法，属于大数据领域。本发明针对流式地理轨迹数据的特点，提供了一种基于大数据的实时关联计算方法，能够有效对极大峰值的地理轨迹数据进行“消峰”处理、并发计算、实时转发、高效读写等服务。同时，通过引入轨迹目标字典完成了对实时流式地理轨迹数据的匹配，使杂乱的流式地理轨迹数据可按目标分类存储到数据库中形成历史数据。在历史轨迹数据处理过程中，通过轨迹合并，解决了批号突变问题。在目标维护模块，通过巧妙的缓冲时间设计和关键字拆分，视图映射，完成了同义词匹配和高效的数据同步功能。本发明对外提供高精度实时数据推送服务和多维度的历史数据查询服务。

公开(公告)号：CN115017217B

公开(公告)日：2024-11-01

申请号：CN202210566652.6

申请日：2022-05-23

Applicant: 北京计算机技术及应用研究所

Inventor： 徐星旺 ,  余增文 ,  高峰 ,  彭谭 ,  韩翠红

IPC: G06F16/25 ,  G06F16/27 ,  G06F16/29

Abstract: 本发明涉及一种流式地理轨迹数据的治理方法，属于大数据领域。本发明针对流式地理轨迹数据的特点，提供了一种基于大数据的实时关联计算方法，能够有效对极大峰值的地理轨迹数据进行“消峰”处理、并发计算、实时转发、高效读写等服务。同时，通过引入轨迹目标字典完成了对实时流式地理轨迹数据的匹配，使杂乱的流式地理轨迹数据可按目标分类存储到数据库中形成历史数据。在历史轨迹数据处理过程中，通过轨迹合并，解决了批号突变问题。在目标维护模块，通过巧妙的缓冲时间设计和关键字拆分，视图映射，完成了同义词匹配和高效的数据同步功能。本发明对外提供高精度实时数据推送服务和多维度的历史数据查询服务。

公开(公告)号：CN113901090A

公开(公告)日：2022-01-07

申请号：CN202111266120.2

申请日：2021-10-28

Applicant: 北京计算机技术及应用研究所

Inventor： 高峰 ,  余曾文 ,  徐星旺

IPC: G06F16/2455 ,  G06F16/242 ,  G06F16/22 ,  G06F16/2458

Abstract: 本发明涉及一种实时态势数据引接及处理的方法，属于雷达数据处理领域。本发明的方法包括：实时数据的引接；数据的预处理，包括非空判断和中英文转换；数据机舷号统一，缺失属性补充，动态的流数据需要与静态字典数据的关联匹配，匹配到的静态字典信息填回实时态势流中；数据存储与推送:将匹配完成的实时数据，一份进行持久化存储，一份简单处理后推送到消息队列中，供应用系统调用；静态字典的动态维护与刷新。本发明提出的实时数据引接及处理的方法，接入方便，通过动态增加流任务sql的方法灵活扩展数据处理的功能,能够得到快速准确的处理结果。在需要对实时数据进行数据清洗、实时字典匹配以及流数据存储与推送场景中有着重要的应用价值。