基于开源Hadoop的栅格数据分布式处理
文献类型：中文期刊论文
| 作者 | 冯敏 |
| 发表日期 | 2013 |
| 关键词 | 栅格数据 分布式计算 Hadoop 数据存储 分布式存储 |
| ISSN号 | 1671-4512 |
| 摘要 | 为实现大规模栅格数据的高性能分布式处理,在最新开源项目Hadoop基础上,设计与开发了一个基于MapReduce计算模型的栅格数据分布式计算系统,重点探讨该系统的栅格数据HDFS分布式存储、高效Map并行处理及结果Reduce合并等关键技术;基于上述技术实现了对大规模栅格数据分布式计算原型系统,详细介绍系统组成,并进一步将其应用于处理全国范围90m地形数据.结果表明:分布式计算方法通过连接多计算节点,有效地提高了栅格数据计算效率,提高地学栅格数据的分析计算能力,从而解决地学相关模拟计算的性能瓶颈. |
| 出处 | 华中科技大学学报(自然科学版)
 |
| 期 | 7页:103-108 |
| 收录类别 | CSCD |
| 语种 | 中文 |
| 源URL | [http://ir.igsnrr.ac.cn/handle/311030/28353]  |
| 专题 | 地理科学与资源研究所_历年回溯文献 |
| 推荐引用方式 GB/T 7714 | 冯敏. 基于开源Hadoop的栅格数据分布式处理. 2013. |
入库方式： OAI收割
来源：地理科学与资源研究所
浏览0
下载0
收藏0
其他版本
除非特别说明，本系统中所有内容都受版权保护，并保留所有权利。