基于Cassandra的海量MUSER数据分布式存储与检索研究
文献类型:期刊论文
作者 | 石玥1; 王锋1,2![]() ![]() |
刊名 | 天文研究与技术(Astronomical Research & Technology)
![]() |
出版日期 | 2018-07 |
卷号 | 15期号:03页码:361-368 |
关键词 | 非关系型数据库 存储 检索 |
ISSN号 | 1672-7673 |
DOI | 10.14005/j.cnki.issn1672-7673.20180426.007 |
其他题名 | The Study of the Data Storage and Retrieval for the Massive Data of MUSER based on Cassandra |
产权排序 | 第2完成单位 |
英文摘要 | 明安图射电频谱日像仪每天产生海量观测数据,传统的关系型数据库存储和管理这些数据时,面临着读写延迟高、性能和容量扩展能力有限以及可用性弱等诸多问题。针对这些问题,开展了基于No SQL的海量数据存储与检索应用研究。首先,详细分析了明安图射电频谱日像仪数据特点、存储需要以及面临的问题;然后,对明安图射电频谱日像仪进行数据建模,给出了明安图射电频谱日像仪的列式非关系型数据模型,同时提出了元数据和数据在No SQL中的同步存储方法,解决了二者的一致性问题,在此基础上实现了基于Cassandra的海量天文数据存储管理系统(MBDMS),最后通过实验验证了系统存储与检索的高效性、扩展性以及可行性,从结果来看,MBDMS可以很好的满足数据管理需要,是解决当前数据存储问题的一种有效方案。 |
学科主题 | 天文学 ; 天文学其他学科 ; 计算机科学技术 |
分类号 | Tn216 |
资助项目 | 国家自然科学基金[61462053] ; 国家自然科学基金[11703010] ; 中国博士后科学基金[2016M602730] |
语种 | 中文 |
CSCD记录号 | CSCD:6272018 |
资助机构 | 国家自然科学基金[61462053, 11703010] ; 中国博士后科学基金[2016M602730] |
源URL | [http://ir.ynao.ac.cn/handle/114a53/12154] ![]() |
专题 | 云南天文台_其他 |
作者单位 | 1.昆明理工大学云南省计算机技术应用重点实验室,云南,昆明,650504 2.中国科学院云南天文台,云南,昆明,650216 |
推荐引用方式 GB/T 7714 | 石玥,王锋,李鹏程,等. 基于Cassandra的海量MUSER数据分布式存储与检索研究[J]. 天文研究与技术(Astronomical Research & Technology),2018,15(03):361-368. |
APA | 石玥,王锋,李鹏程,&刘应波.(2018).基于Cassandra的海量MUSER数据分布式存储与检索研究.天文研究与技术(Astronomical Research & Technology),15(03),361-368. |
MLA | 石玥,et al."基于Cassandra的海量MUSER数据分布式存储与检索研究".天文研究与技术(Astronomical Research & Technology) 15.03(2018):361-368. |
入库方式: OAI收割
来源:云南天文台
浏览0
下载0
收藏0
其他版本
除非特别说明,本系统中所有内容都受版权保护,并保留所有权利。