一种基于Spark的分布式混合索引结构的设计与实现

目录

第1 章绪 论

1.1 课题背景及研究的目的和意义

1.1.1 课题研究的背景

1.1.2 课题研究的目的

1.1.3 课题研究的意义

1.2 与课题相关的国内外研究状况

1.2.1 国外研究现状

1.2.2 国内研究现状

1.2.3 国内外文献综述的简析

1.3 主要研究内容

第2 章分布式混合索引平台需求与关键技术分析

2.1 索引信息获取的流程分析

2.2 系统功能需求分析

2.2.1 索引模块需求分析

2.2.2 分布式下载需求分析

2.2.3 索引推荐需求分析

2.2.4 索引清除需求分析

2.3 非功能性需求分析

2.3.1 可扩展需求分析

2.3.2 性能需求分析

2.4 关键技术及分析

2.4.1 分布式存储

2.4.2 分布式计算

2.4.3 RPC 通信

2.4.4 多线程处理

2.5 索引性能影响因素分析

2.6 索引与数据读写性能关系分析

2.7 分布式索引与分布式数据处理关系

2.8 分布式混合索引与现有技术方案的对比

2.9 本章小结

第3 章分布式混合索引结构设计

3.1 混合索引结构

3.2 索引树的构建

3.3 索引结构复杂度分析

3.4 索引分区策略的构建

3.5 分布式协调系统

3.6 本章小结

第4 章分布式混合索引系统设计

4.1 索引系统架构设计

4.2 分布式索引系统各模块设计

4.2.1 索引主控模块

4.2.2 索引操作模块

4.2.3 结果推荐模块

4.2.4 分布式下载模块

4.2.5 清尾模块

4.2.6 web 展现模块

4.3 本章小结

第5 章分布式混合索引系统实现

5.1 索引系统框架的实现

5.2 主控模块的实现

5.2.1 通信模块的实现

5.2.2 分布式下载模块的实现

5.3 web 展现模块的实现

5.3.1 CPU 看板功能

5.3.2 索引数据推荐功能

5.3.3 索引数据检索功能

5.3.4 索引后台管理

5.3.5 索引数据可视化分析

5.4 本章小结

第6 章分布式混合索引系统测试与分析

6.1 索引测试环境搭建

6.2 索引系统功能测试

6.3 索引系统性能测试

6.4 本章小结

结 论

参考文献

声明

致谢