基本信息:
- 专利标题： 基于分级索引实现分布式大数据集群设计和部署优化的系统及其方法
- 申请号：CN202411092546.4 申请日：2024-08-09
- 公开(公告)号：CN119128002A 公开(公告)日：2024-12-13
- 发明人： 杨源杰 , 梁辰 , 朱丽英 , 吴松洋
- 申请人： 公安部第三研究所
- 申请人地址： 上海市徐汇区岳阳路76号
- 专利权人： 公安部第三研究所
- 当前专利权人： 公安部第三研究所
- 当前专利权人地址： 上海市徐汇区岳阳路76号
- 代理机构： 上海智信专利代理有限公司
- 代理人： 王洁; 郑暄
- 主分类号： G06F16/27
- IPC分类号： G06F16/27 ; G06F16/2455
摘要：
本发明涉及一种基于分级索引实现分布式大数据集群设计和部署优化的系统，所述的系统包括：高速索引集群，用于单独保存所有索引数据，并完成查询条件到每一条数据记录的唯一内部序列号的映射处理；数据存储集群，用于将数据保存在多个数据存储节点上，并以唯一内部序列号的随机数前缀为片键，和多个数据存储节点进行一一对应；总控制器服务器(组)，用于接收系统内所有的读、写请求，并同步所述的高速索引集群和数据存储集群完成读、写请求后，将读写请求的结果返回至请求调用方。本发明还涉及一种相应的方法。采用了本发明的该基于分级索引实现分布式大数据集群设计和部署优化的系统及其方法，极大的提升了单个数据节点的数据存储容量。
IPC结构图谱:
| G | 物理 |
| --G06 | 计算；推算；计数 |
| ----G06F | 电数字数据处理 |
| ------G06F16/00 | 信息检索；数据库结构；文件系统结构 |
| --------G06F16/10 | .文件系统；文件服务器 |
| ----------G06F16/27 | ..在数据库间或在分布式数据库内的数据复制、分配或同步；其分布式数据系统结构 |