中国科学院机构知识库网格
Chinese Academy of Sciences Institutional Repositories Grid
基于Cassandra的海量MUSER数据分布式存储与检索研究

文献类型:期刊论文

作者石玥1; 王锋1,2; 李鹏程1; 刘应波1
刊名天文研究与技术(Astronomical Research & Technology)
出版日期2018-07
卷号15期号:03页码:361-368
关键词非关系型数据库 存储 检索
ISSN号1672-7673
DOI10.14005/j.cnki.issn1672-7673.20180426.007
其他题名The Study of the Data Storage and Retrieval for the Massive Data of MUSER based on Cassandra
产权排序第2完成单位
英文摘要

明安图射电频谱日像仪每天产生海量观测数据,传统的关系型数据库存储和管理这些数据时,面临着读写延迟高、性能和容量扩展能力有限以及可用性弱等诸多问题。针对这些问题,开展了基于No SQL的海量数据存储与检索应用研究。首先,详细分析了明安图射电频谱日像仪数据特点、存储需要以及面临的问题;然后,对明安图射电频谱日像仪进行数据建模,给出了明安图射电频谱日像仪的列式非关系型数据模型,同时提出了元数据和数据在No SQL中的同步存储方法,解决了二者的一致性问题,在此基础上实现了基于Cassandra的海量天文数据存储管理系统(MBDMS),最后通过实验验证了系统存储与检索的高效性、扩展性以及可行性,从结果来看,MBDMS可以很好的满足数据管理需要,是解决当前数据存储问题的一种有效方案。

学科主题天文学 ; 天文学其他学科 ; 计算机科学技术
分类号Tn216
资助项目国家自然科学基金[61462053] ; 国家自然科学基金[11703010] ; 中国博士后科学基金[2016M602730]
语种中文
CSCD记录号CSCD:6272018
资助机构国家自然科学基金[61462053, 11703010] ; 中国博士后科学基金[2016M602730]
源URL[http://ir.ynao.ac.cn/handle/114a53/12154]  
专题云南天文台_其他
作者单位1.昆明理工大学云南省计算机技术应用重点实验室,云南,昆明,650504
2.中国科学院云南天文台,云南,昆明,650216
推荐引用方式
GB/T 7714
石玥,王锋,李鹏程,等. 基于Cassandra的海量MUSER数据分布式存储与检索研究[J]. 天文研究与技术(Astronomical Research & Technology),2018,15(03):361-368.
APA 石玥,王锋,李鹏程,&刘应波.(2018).基于Cassandra的海量MUSER数据分布式存储与检索研究.天文研究与技术(Astronomical Research & Technology),15(03),361-368.
MLA 石玥,et al."基于Cassandra的海量MUSER数据分布式存储与检索研究".天文研究与技术(Astronomical Research & Technology) 15.03(2018):361-368.

入库方式: OAI收割

来源:云南天文台

浏览0
下载0
收藏0
其他版本

除非特别说明,本系统中所有内容都受版权保护,并保留所有权利。