基于NGAS的多点观测数据存储与同步方法
文献类型:期刊论文
作者 | 石聪明1,3; 邓辉2,3; 戴伟3,4![]() ![]() ![]() |
刊名 | 天文研究与技术(Astronomical Research & Technology)
![]() |
出版日期 | 2019-04 |
卷号 | 16期号:2页码:204-210 |
关键词 | 下一代归档存储系统 平方千米阵列 存储与同步 海量数据 ZeroMQ |
ISSN号 | 1672-7673 |
DOI | 10.14005/j.cnki.issn1672-7673.20180903.001 |
其他题名 | NGAS-Based Multi-site Observation Data Storage and Synchronization Method |
产权排序 | 第4完成单位 |
英文摘要 | 平方千米阵列(Square Kilometre Array, SKA)望远镜建成后将具有超高的灵敏度、超快的巡天速度以及宽视场,进而产生超海量的观测数据。SKA天文台与各国区域数据中心间的海量数据同步传输是当前SKA建设中的一个难点。SKA先导项目使用的下一代归档存储系统(Next Generation Archive System, NGAS)在应用测试中存在效率低下,性能不足等问题。提出了一种基于ZeroMQ的数据存储与同步方法,通过采用更加高效的异步消息机制实现同步传输数据,回避了NGAS原有的采用HTTP协议的局限。实验结果表明,新方法在平均数据归档存储效率方面比原有方法快了近40倍,能够基本满足10 GB带宽的全速传输需要,取得了较好的使用效果。 |
学科主题 | 天文学 ; 天文学其他学科 ; 电子、通信与自动控制技术 ; 计算机科学技术 |
分类号 | P161 ; Tp311.1 |
资助项目 | 国家重点研发项目[2018YFA0404603] ; 国家重点研发项目[2016YFE0100300] ; 国家自然科学基金[11403009] ; 国家自然科学基金[11463003] ; 国家自然科学基金[11773012] ; 国家自然科学天文联合基金[U1531132] ; 国家自然科学天文联合基金[U1631129] ; 国家自然科学天文联合基金[U1831204] ; 塞尔网络下一代互联网技术创新项目[NGII20170204] |
语种 | 中文 |
CSCD记录号 | CSCD:6470967 |
资助机构 | 国家重点研发项目[2018YFA0404603, 2016YFE0100300] ; 国家自然科学基金[11403009, 11463003, 11773012] ; 国家自然科学天文联合基金[U1531132, U1631129, U1831204] ; 塞尔网络下一代互联网技术创新项目[NGII20170204] |
源URL | [http://ir.ynao.ac.cn/handle/114a53/18288] ![]() |
专题 | 云南天文台_其他 |
通讯作者 | 王锋 |
作者单位 | 1.昆明理工大学管理与经济学院, 云南, 昆明, 650093 2.广州大学天体物理中心/物理与电子工程学院, 广东, 广州, 510006 3.昆明理工大学云南省计算机技术应用重点实验室, 云南, 昆明, 650500 4.中国科学院云南天文台, 云南, 昆明, 650011 |
推荐引用方式 GB/T 7714 | 石聪明,邓辉,戴伟,等. 基于NGAS的多点观测数据存储与同步方法[J]. 天文研究与技术(Astronomical Research & Technology),2019,16(2):204-210. |
APA | 石聪明,邓辉,戴伟,卫守林,&王锋.(2019).基于NGAS的多点观测数据存储与同步方法.天文研究与技术(Astronomical Research & Technology),16(2),204-210. |
MLA | 石聪明,et al."基于NGAS的多点观测数据存储与同步方法".天文研究与技术(Astronomical Research & Technology) 16.2(2019):204-210. |
入库方式: OAI收割
来源:云南天文台
浏览0
下载0
收藏0
其他版本
除非特别说明,本系统中所有内容都受版权保护,并保留所有权利。