基于MapReduce的数据挖掘平台设计与实现
文献类型:期刊论文
作者 | 黄斌 ; 许舒人 ; 蒲卫 |
刊名 | 计算机工程与设计
![]() |
出版日期 | 2013 |
卷号 | 34期号:2页码:495-501 |
关键词 | MapReduce编程模型 数据挖掘 Hadoop平台 模型驱动 可视化 |
ISSN号 | 1000-7024 |
其他题名 | design and implementation of mapreduce-based data mining platform |
中文摘要 | MapReduce编程模型的简单性和高性价比使得其适用于海量数据的并行处理。然而,MapReduce欠缺对多数据源、组件复用以及数据可视化支持,这些缺点使用户在运用MapReduce框架进行数据挖掘时暴露出开发效率低下,重复开发等问题。提出了一种基于MapReduce的数据挖掘平台的设计与实现,该设计思想为Hadoop作为大规模数据计算平台在数据挖掘、数据可视化以及商业智能应用方面的不足提供了参考与弥补。同时,基于该方法实现了一个大规模数据挖掘工具。 |
英文摘要 | Profiting from its simplicity and high cost performance, MapReduce programming paradigm is suitable for massive parallel data processing. However, MapReduce's lacking supports for multiple data source, component reuse, and data visua-lization bring in problems such as low efficiency development and redundant coding. A new design and implementation of MapReduce-based data mining platform is proposed to give reference implementation of massive data mining, data visualization and business intelligence applications based on Hadoop. Based on this proposal, a massive data mining tool is implemented. |
学科主题 | Computer Science (provided by Thomson Reuters) |
收录类别 | CNKI ; WANFANG ; CSCD |
资助信息 | 国家科技重大专项核高基基金项目(2010ZX01042-001-001-05)|国家科技支撑计划基金项目(2012BAH05F02、2011BAH15B03) |
语种 | 中文 |
CSCD记录号 | CSCD:4759853 |
公开日期 | 2013-09-17 |
源URL | [http://ir.iscas.ac.cn/handle/311060/15545] ![]() |
专题 | 软件研究所_软件所图书馆_期刊论文 |
推荐引用方式 GB/T 7714 | 黄斌,许舒人,蒲卫. 基于MapReduce的数据挖掘平台设计与实现[J]. 计算机工程与设计,2013,34(2):495-501. |
APA | 黄斌,许舒人,&蒲卫.(2013).基于MapReduce的数据挖掘平台设计与实现.计算机工程与设计,34(2),495-501. |
MLA | 黄斌,et al."基于MapReduce的数据挖掘平台设计与实现".计算机工程与设计 34.2(2013):495-501. |
入库方式: OAI收割
来源:软件研究所
浏览0
下载0
收藏0
其他版本
除非特别说明,本系统中所有内容都受版权保护,并保留所有权利。