首页> 中国专利> Spark SQL多表连接优化方法、装置、计算机设备和存储介质

Spark SQL多表连接优化方法、装置、计算机设备和存储介质

摘要

本申请涉及一种Spark SQL多表连接优化方法、装置、计算机设备和存储介质。该方法包括:获取根据目标数据仓库设计的SQL多表连接查询语句集;将SQL多表连接查询语句集划分为训练集和测试集;根据训练集和测试集,对预先构建的马尔可夫决策模型进行训练,获得目标数据仓库的多表连接查询计划选择策略;根据多表连接查询计划选择策略,对目标数据仓库的数据表进行连接。解决了Spark SQL现有的查询优化在多表连接查询计划选择时效率低、依赖开发人员经验的问题,能够快速有效地构建多表连接查询执行计划,从而提高Spark SQL执行效率。

著录项

  • 公开/公告号CN113407532A

    专利类型发明专利

  • 公开/公告日2021-09-17

    原文格式PDF

  • 申请/专利号CN202110570663.7

  • 发明设计人 宋爱波;付豪;方效林;杨明;

    申请日2021-05-25

  • 分类号G06F16/22(20190101);G06F16/242(20190101);G06F16/2453(20190101);G06F16/28(20190101);G06K9/62(20060101);

  • 代理机构32200 南京经纬专利商标代理有限公司;

  • 代理人罗运红

  • 地址 210012 江苏省南京市雨花台区大周路34号科创城B3栋第8层及第7层702、703室

  • 入库时间 2023-06-19 12:37:08

相似文献

  • 专利
  • 中文文献
  • 外文文献
获取专利

客服邮箱:kefu@zhangqiaokeyan.com

京公网安备:11010802029741号 ICP备案号:京ICP备15016152号-6 六维联合信息科技 (北京) 有限公司©版权所有
  • 客服微信

  • 服务号