一种基于缓存的并发ETL数据流程处理框架
文献类型:期刊论文
作者 | 罗后启 ; 周伟 ; 叶丹 ; 于瑾维 |
刊名 | Computer Applications and Software
![]() |
出版日期 | 2012 |
卷号 | 29期号:1页码:88-91,144 |
关键词 | Data integration Data flow Parallel Buffer reuse |
ISSN号 | 1000-386X |
其他题名 | a buffer-based parallel etl data flow processing framework |
中文摘要 | ETL(Extraction-Transformation-Loader)是企业内部和企业间信息资源交换和共享的关键技术。随着企业数据量的剧增, 如何提高数据处理能力和执行效率成为ETL需要解决的难题之一。提出一个基于缓存的并发ETL数据流程处理框架,该框架使用基于组件分类的缓存复用技术来 降低内存消耗和数据拷贝次数;同时使用一种并发的数据处理流程调度执行策略,该策略具有任务、流水线、数据处理多粒度并行的特点。该方法已在网驰平台ON CE DQ实现并得到验证。 |
学科主题 | Computer Science |
语种 | 中文 |
公开日期 | 2012-11-12 |
源URL | [http://ir.iscas.ac.cn/handle/311060/14618] ![]() |
专题 | 软件研究所_软件工程技术研究开发中心 _期刊论文 |
推荐引用方式 GB/T 7714 | 罗后启,周伟,叶丹,等. 一种基于缓存的并发ETL数据流程处理框架[J]. Computer Applications and Software,2012,29(1):88-91,144. |
APA | 罗后启,周伟,叶丹,&于瑾维.(2012).一种基于缓存的并发ETL数据流程处理框架.Computer Applications and Software,29(1),88-91,144. |
MLA | 罗后启,et al."一种基于缓存的并发ETL数据流程处理框架".Computer Applications and Software 29.1(2012):88-91,144. |
入库方式: OAI收割
来源:软件研究所
浏览0
下载0
收藏0
其他版本
除非特别说明,本系统中所有内容都受版权保护,并保留所有权利。