说明:收录25万 73个行业的国家标准 支持批量下载
文库搜索
切换导航
文件分类
频道
仅15元无限下载
联系我们
问题反馈
文件分类
仅15元无限下载
联系我们
问题反馈
批量下载
(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210545019.9 (22)申请日 2022.05.19 (71)申请人 中国地质大 学 (北京) 地址 100083 北京市海淀区学院路2 9号 (72)发明人 孙大为 吴旗 (74)专利代理 机构 北京市广友专利事务所有限 责任公司 1 1237 专利代理师 张仲波 (51)Int.Cl. G06F 16/22(2019.01) G06F 16/2455(2019.01) (54)发明名称 一种键值分离的键值存储引擎索引优化方 法及装置 (57)摘要 本发明涉及计算机存储技术领域, 特别是指 一种键值分离的键值存储引擎索引优化方法及 装置, 方法包括: 当接收到写命令时, 获取待写入 的键值对, 基于预设阈值进行条件键值分离处 理, 记录键值分离处理的次数; 将键值分离处理 的次数与预设次数阈值进行比较, 得到第一参 数; 获取SS Table的生命周期, 将生命周期与预设 生命周期阈值进行比较, 得到第二参数; 根据第 一参数以及第二参数, 判断是否对SSTable构建 学习索引模型; 当确定对SSTable构建学习索引 模型时, 基于SS Table构建学习索引模型; 当接收 到读命令时, 基于学习索引模型进行读操作。 采 用本发明, 可 以减少查询步骤产生的延迟, 提高 数据查询效率。 权利要求书2页 说明书12页 附图4页 CN 114896250 A 2022.08.12 CN 114896250 A 1.一种键值分离的键值存 储引擎索引优化方法, 其特 征在于, 所述方法包括: 当接收到写命令时, 获取待写入的键值对, 基于预设阈值进行条件键值分离处理, 记录 键值分离处 理的次数; 将所述键值分离处 理的次数与预设次数阈值进行比较, 得到第一 参数; 获取SSTable的生命周期, 将所述生命周期与预设生命周期阈值进行比较, 得到第二参 数; 根据所述第一 参数以及所述第二 参数, 判断是否对所述S STable构建学习索引模型; 当确定对所述S STable构建学习索引模型时, 基于所述S STable构建学习索引模型; 当接收到读命令时, 基于所述学习索引模型进行读 操作。 2.根据权利要求1所述的方法, 其特征在于, 所述基于预设阈值进行条件键值分离处 理, 包括: 获取预设阈值, 将键值对中的值与预设阈值进行比较, 如果所述值大于预设阈值, 则将 键值对中的键与值分离, 将键与指向值日志的指针重新组成键值对; 如果所述值小于或等于预设阈值, 则判断值的长度 是否等于值预设长度, 如果不是, 则 对所述值进行补0, 使得 所述值的长度等于值预设长度。 3.根据权利要求1所述的方法, 其特征在于, 所述将所述键值分离处理 的次数与预设次 数阈值进行比较, 得到第一 参数, 包括: 将所述键值分离处理 的次数与预设次数阈值进行比较, 如果所述键值分离处理 的次数 大于预设次数阈值, 则确定第一参数为0, 如果所述键值分离处理的次数小于或等于预设次 数阈值, 则确定第一 参数为1。 4.根据权利要求3所述的方法, 其特征在于, 所述将所述生命周期与 预设生命周期阈值 进行比较, 得到第二 参数, 包括: 将所述生命周期与 预设生命周期阈值进行比较, 如果所述生命周期大于预设生命周期 阈值, 则确定第二参数为1, 如果所述生命周期小于或等于预设生命周期阈值, 则确定第二 参数为0。 5.根据权利要求4所述的方法, 其特征在于, 所述根据所述第一参数以及所述第二参 数, 判断是否对所述S STable构建学习索引模型, 包括: 当所述第一参数为0、 且所述第二参数为0时, 确定对所述SSTable不构建学习索引模 型; 当所述第一 参数为1、 且所述第二 参数为0时, 确定对所述S STable构建学习索引模型; 当所述第一 参数为0、 且所述第二 参数为1时, 确定对所述S STable构建学习索引模型; 当所述第一 参数为1、 且所述第二 参数为1时, 确定对所述S STable构建学习索引模型。 6.根据权利要求1所述的方法, 其特征在于, 所述当接收到读命令时, 基于所述学习索 引模型进行读 操作, 包括: 基于所述学习索引模型读取索引路径, 根据 所述索引路径确定读命令对应的目标键存 在的字节范围; 根据所述字节范围提取对应的数据块, 使用布隆过滤器对目标键进行计算, 得到读命 令对应的目标值是否存 储在所述数据块的结果; 当确定目标值存储在所述数据块 时, 基于所述学习索引模型确定读命令对应的目标键权 利 要 求 书 1/2 页 2 CN 114896250 A 2值对, 根据所述目标键值对读取目标值。 7.根据权利要求6所述的方法, 其特征在于, 所述基于所述学习索引模型确定读命令对 应的目标键值对, 包括: 获取键预设长度以及值预设长度; 获取所述学习索引模型输出的偏移量; 确定所述键预设长度与所述 值预设长度的和值, 确定所述和值与所述偏移量的乘积; 根据所述乘积定位读命令对应的目标键值对。 8.一种键值分离的键值存储引 擎索引优化装置, 其特征在于, 所述键值分离的键值存 储引擎索引优化装置用于实现键值分离的键值存 储引擎索引优化方法, 所述装置包括: 分离模块, 用于当接收到写命令时, 获取待写入的键值对, 基于预设阈值进行条件键值 分离处理, 记录键值分离处 理的次数; 第一比较模块, 用于将所述键值分离处理的次数与预设次数阈值进行比较, 得到第一 参数; 第二比较模块, 用于获取SSTable的生命周期, 将所述生命周期与预设生命周期阈值进 行比较, 得到第二 参数; 判断模块, 用于根据所述第一参数以及所述第二参数, 判断是否对所述SSTable构 建学 习索引模型; 构建模块, 用于当确定对所述SSTable构建学习索引模型时, 基于所述SSTable构建学 习索引模型; 读操作模块, 用于当接收到读命令时, 基于所述学习索引模型进行读 操作。 9.根据权利要求8所述的装置, 其特 征在于, 所述分离模块, 用于: 获取预设阈值, 将键值对中的值与预设阈值进行比较, 如果所述值大于预设阈值, 则将 键值对中的键与值分离, 将键与指向值日志的指针重新组成键值对; 如果所述值小于或等于预设阈值, 则判断值的长度 是否等于值预设长度, 如果不是, 则 对所述值进行补0, 使得 所述值的长度等于值预设长度。 10.根据权利要求8所述的装置, 其特 征在于, 所述第一比较模块, 用于: 将所述键值分离处理 的次数与预设次数阈值进行比较, 如果所述键值分离处理 的次数 大于预设次数阈值, 则确定第一参数为0, 如果所述键值分离处理的次数小于或等于预设次 数阈值, 则确定第一 参数为1。权 利 要 求 书 2/2 页 3 CN 114896250 A 3
专利 一种键值分离的键值存储引擎索引优化方法及装置
文档预览
中文文档
19 页
50 下载
1000 浏览
0 评论
309 收藏
3.0分
赞助2.5元下载(无需注册)
温馨提示:本文档共19页,可预览 3 页,如浏览全部内容或当前文档出现乱码,可开通会员下载原始文档
下载文档到电脑,方便使用
赞助2.5元下载
本文档由 人生无常 于
2024-03-18 00:12:35
上传分享
举报
下载
原文档
(857.3 KB)
分享
友情链接
YD-T 3763.1-2021 研发运营一体化(DevOps)能力成熟度模型 第1部分:总体架构.pdf
GB-T 23868-2019 体育用品的分类.pdf
GB-T 26408-2020 混凝土搅拌运输车.pdf
GB-T 35218-2017 拖拉机可靠性 台架试验方法.pdf
医疗卫生机构网络安全管理办法.pdf
GM-T 0075-2019 银行信贷信息系统密码应用技术要求.pdf
DB34-T 3906-2021 基层防汛监测预警系统集成规范 安徽省.pdf
GB-T 42569-2023 工业互联网平台 开放应用编程接口功能要求.pdf
GB-T 32169.2-2015 政务服务中心运行规范 第2部分:进驻要求.pdf
DB22-T 2123-2014 栗山天牛综合防治技术规程 吉林省.pdf
GB-T 37721-2019信息技术大数据分析系统功能要求.pdf
GB-T 32456-2015 橡胶塑料机械用电磁加热节能系统通用技术条件.pdf
GB-T 18916.56-2021 取水定额 第56部分:毛皮.pdf
GB-T 30825-2014 热处理温度测量.pdf
T-GXNS 005—2023 钦州市新型鱼排建设工程技术规范.pdf
freebuf 2021企业安全运营实践研究报告.pdf
T-CESA 1040—2019 信息技术 人工智能 面向机器学习的数据标注规程.pdf
GB 13561.1-2009 港口连续装卸设备安全规程 第1部分:散粮筒仓系统.pdf
专利 基于有限元仿真的SiP芯片封装分层寿命预测方法.PDF
美国 关键基础设施信息安全框架 IPDRR.pdf
1
/
3
19
评价文档
赞助2.5元 点击下载(857.3 KB)
回到顶部
×
微信扫码支付
2.5
元 自动下载
官方客服微信:siduwenku
支付 完成后 如未跳转 点击这里 下载
站内资源均来自网友分享或网络收集整理,若无意中侵犯到您的权利,敬请联系我们
微信(点击查看客服)
,我们将及时删除相关资源。