多格式海量数据统一存取的索引结构 (2013年)

时间:2024-06-15 10:07:38
【文件属性】:

文件名称:多格式海量数据统一存取的索引结构 (2013年)

文件大小:1.67MB

文件格式:PDF

更新时间:2024-06-15 10:07:38

工程技术 论文

为提高多格式海量数据统一存取效率, 提出了一种基于Hadoop的分布式数据读取模式。并通过对海量数据非主键索引结构的研究, 结合统一存取的描述理念, 提出了基于HDFS的一种可适用于B-树和R-树及其变种的层次索引结构, 改变了原键―值存储在非主键索引结构中的劣势。通过提出Hadoop缓冲策略、基于随机读取的新数据传输模型以及相应的查询处理策略, 进一步降低了数据传输开销。实验表明, 该系列方法优化了统一存取中随机存取效率, 减少了相应的查询响应时间和数据传输开销, 提高了多格式海量数据统一存取的性能。<


网友评论