中国科学院机构知识库网格
Chinese Academy of Sciences Institutional Repositories Grid
一种基于缓存的并发ETL数据流程处理框架

文献类型:期刊论文

作者罗后启 ; 周伟 ; 叶丹 ; 于瑾维
刊名Computer Applications and Software
出版日期2012
卷号29期号:1页码:88-91,144
关键词Data integration Data flow Parallel Buffer reuse
ISSN号1000-386X
其他题名a buffer-based parallel etl data flow processing framework
中文摘要ETL(Extraction-Transformation-Loader)是企业内部和企业间信息资源交换和共享的关键技术。随着企业数据量的剧增, 如何提高数据处理能力和执行效率成为ETL需要解决的难题之一。提出一个基于缓存的并发ETL数据流程处理框架,该框架使用基于组件分类的缓存复用技术来 降低内存消耗和数据拷贝次数;同时使用一种并发的数据处理流程调度执行策略,该策略具有任务、流水线、数据处理多粒度并行的特点。该方法已在网驰平台ON CE DQ实现并得到验证。
学科主题Computer Science
语种中文
公开日期2012-11-12
源URL[http://ir.iscas.ac.cn/handle/311060/14618]  
专题软件研究所_软件工程技术研究开发中心 _期刊论文
推荐引用方式
GB/T 7714
罗后启,周伟,叶丹,等. 一种基于缓存的并发ETL数据流程处理框架[J]. Computer Applications and Software,2012,29(1):88-91,144.
APA 罗后启,周伟,叶丹,&于瑾维.(2012).一种基于缓存的并发ETL数据流程处理框架.Computer Applications and Software,29(1),88-91,144.
MLA 罗后启,et al."一种基于缓存的并发ETL数据流程处理框架".Computer Applications and Software 29.1(2012):88-91,144.

入库方式: OAI收割

来源:软件研究所

浏览0
下载0
收藏0
其他版本

除非特别说明,本系统中所有内容都受版权保护,并保留所有权利。