首页 > 《网络安全技术与应用》 > 2014年10期 > 基于Hadoop集群的海量数据处理系统

基于Hadoop集群的海量数据处理系统

在线阅读下载PDF 导出详情

摘要近年来,随着各个领域中大规模、海量数据存储和处理需求的不断增加,集群作为一种廉价的可以提供强大计算能力的并行计算技术得到越来越广泛的应用,其具有大型机的超级计算能力和较低成本投入.从而成为各种高性能计算的主流方向,如科学计算与其他需要大规模并行计算的应用服务等.本文在分析现有分布式储存和计算等关键技术基础上,结合对Hadoop的集群技术的研究以及自身的业务需求和实际软硬件实力,提出了一种基于Hadoop的海量数据处理模型.

DOI 3j73q90m41/1454977

作者张遥;蒋春娟

机构地区不详

出处《网络安全技术与应用》 2014年10期

关键词集群海量数据 HADOOP MAPREDUCE

分类 [自动化与计算机技术][计算机应用技术]

出版日期 2014年10月20日（中国期刊网平台首次上网日期，不代表论文的发表时间）