姚洁铭:时空大数据的存取优化方法研究论文

姚洁铭:时空大数据的存取优化方法研究论文

本文主要研究内容

作者姚洁铭(2019)在《时空大数据的存取优化方法研究》一文中研究指出:身处万物皆可连的时代,各种设备能够记录下既包含时间和空间维度,同时也包含各种属性状态的数据,可统称为时空数据。如何充分利用这些数据是当前的难题。首先面临的问题就是如何存取这些数据。传统的时空数据库面临着不能承担如此庞大的数据量各种操作和数据非结构化的问题;当前大数据存取方案能够解决数据量大和数据非结构化等问题,但却不支持数据的时空操作。因此,分析处理时空大数据,亟需解决时空大数据的存取问题。当前时空大数据存取解决方案主要以与大数据系统框架紧密结合和设计大数据存取表两个方面来解决时空数据存取方案。然而,这两种方案只能够解决部分问题,且存取效率不能取得令人满意的效果。本文在分析了大数据的数据存取解决方案和传统时空数据存取方案后,基于现有时空大数据存取解决方案进行了优化。提出基于XZ-order的geohashes存取索引和优化HBase表结合的数据存取方案。主要研究内容如下:1.深入分析了传统关系型数据在时空数据存取的索引方案。并且分析了大数据存取方案的特性和优点。2.根据当前时空大数据的存取解决方案,提出了一种基于XZ-order的时空数据索引并设计适合时空数据存取的HBase表结构。通过该索引中时空维度与表结构中键的对应,提高时空数据在时空维度的查询效率。并针对提出的方案进行环境搭建和综合测试。3.选取点、线、面地理实体数据对优化方案进行对比实验,测试了本文提出的方案。

Abstract

shen chu mo wu jie ke lian de shi dai ,ge chong she bei neng gou ji lu xia ji bao han shi jian he kong jian wei du ,tong shi ye bao han ge chong shu xing zhuang tai de shu ju ,ke tong chen wei shi kong shu ju 。ru he chong fen li yong zhe xie shu ju shi dang qian de nan ti 。shou xian mian lin de wen ti jiu shi ru he cun qu zhe xie shu ju 。chuan tong de shi kong shu ju ku mian lin zhao bu neng cheng dan ru ci pang da de shu ju liang ge chong cao zuo he shu ju fei jie gou hua de wen ti ;dang qian da shu ju cun qu fang an neng gou jie jue shu ju liang da he shu ju fei jie gou hua deng wen ti ,dan que bu zhi chi shu ju de shi kong cao zuo 。yin ci ,fen xi chu li shi kong da shu ju ,ji xu jie jue shi kong da shu ju de cun qu wen ti 。dang qian shi kong da shu ju cun qu jie jue fang an zhu yao yi yu da shu ju ji tong kuang jia jin mi jie ge he she ji da shu ju cun qu biao liang ge fang mian lai jie jue shi kong shu ju cun qu fang an 。ran er ,zhe liang chong fang an zhi neng gou jie jue bu fen wen ti ,ju cun qu xiao lv bu neng qu de ling ren man yi de xiao guo 。ben wen zai fen xi le da shu ju de shu ju cun qu jie jue fang an he chuan tong shi kong shu ju cun qu fang an hou ,ji yu xian you shi kong da shu ju cun qu jie jue fang an jin hang le you hua 。di chu ji yu XZ-orderde geohashescun qu suo yin he you hua HBasebiao jie ge de shu ju cun qu fang an 。zhu yao yan jiu nei rong ru xia :1.shen ru fen xi le chuan tong guan ji xing shu ju zai shi kong shu ju cun qu de suo yin fang an 。bing ju fen xi le da shu ju cun qu fang an de te xing he you dian 。2.gen ju dang qian shi kong da shu ju de cun qu jie jue fang an ,di chu le yi chong ji yu XZ-orderde shi kong shu ju suo yin bing she ji kuo ge shi kong shu ju cun qu de HBasebiao jie gou 。tong guo gai suo yin zhong shi kong wei du yu biao jie gou zhong jian de dui ying ,di gao shi kong shu ju zai shi kong wei du de cha xun xiao lv 。bing zhen dui di chu de fang an jin hang huan jing da jian he zeng ge ce shi 。3.shua qu dian 、xian 、mian de li shi ti shu ju dui you hua fang an jin hang dui bi shi yan ,ce shi le ben wen di chu de fang an 。

论文参考文献

  • [1].时空大数据支持下的城市活力测量方法及增长策略研究[D]. 范冬婉.武汉大学2019
  • 读者推荐
  • [1].基于分布式存储的地理时空大数据管理系统研究[D]. 邱程.江汉大学2019
  • [2].基于HBase的多维索引查询机制的优化研究[D]. 谭玉龙.郑州大学2019
  • [3].时空大数据支持下的城市活力测量方法及增长策略研究[D]. 范冬婉.武汉大学2019
  • [4].时空多维大数据可视化系统的设计与实现[D]. 孔微.北京邮电大学2019
  • [5].基于公安大数据图片存取技术研究[D]. 程孝孝.长江大学2019
  • [6].基于Hadoop平台的地理空间数据管理系统[D]. 张洋.西安电子科技大学2018
  • [7].基于Hadoop平台的时空数据索引和查询技术研究[D]. 何立志.西安电子科技大学2018
  • [8].物联网感知大数据分层存储和查询技术研究[D]. 蔺春华.北京工业大学2018
  • [9].具有时空特性地理大数据处理框架的研究及应用[D]. 王锴.北京邮电大学2018
  • [10].基于Hadoop的时空大数据的分布式检索方法[D]. 王广钰.中国科学院大学(中国科学院国家空间科学中心)2017
  • 论文详细介绍

    论文作者分别是来自长江大学的姚洁铭,发表于刊物长江大学2019-09-04论文,是一篇关于时空大数据论文,空间填充曲线论文,存取优化论文,长江大学2019-09-04论文的文章。本文可供学术参考使用,各位学者可以免费参考阅读下载,文章观点不代表本站观点,资料来自长江大学2019-09-04论文网站,若本站收录的文献无意侵犯了您的著作版权,请联系我们删除。

    标签:;  ;  ;  ;  

    姚洁铭:时空大数据的存取优化方法研究论文
    下载Doc文档

    猜你喜欢