Hadoop云平台如何选择服务器
阅读:2019 2016-08-08 16:33:15

云计算是一种新型的信息共享基础构架的计算模型。在分布式计算、网格计算、并行计算等技术的不断发展下,云计算应运而生。现如今,云计算在商业领域己得到广泛使用,云计算的原理是将计算任务分配在容量庞大的资源池中,这些资源池并不是远程服务器或计算机实体,而是由大量的分散式计算机组成,企业和用户根据需求访问计算机和存储系统。


Hadoop是构建云计算平台的技术框架选择之一。 Hadoop最初起源于2002年Apache Lucene下面的一个名叫Nutch的子项目。Hadoop分布式文件系统(Hadoop Distributed File System, HDFS)和一个对大规模数据进行分布式处理的计算框架MapReduce,是Hadoop的两大技术核心,由于Hadoop上的数据可以自动保存多个副本,某个节点失效另外的节点可以代替,因此容错性很高。它是通过并行处理的方式进行计算,所以它是高效的。除了HDFS和MapReduce以外,Hadoop项目还包括HBase, Chukwa, Pig, Hive等相关项目。Hadoop的这些优点都是选择Hadoop作为云计算平台框架的重要原因。


Hadoop是开源的框架,用户可以根据自己的需求,来构建Hadoop云平台。根据Hadoop的分布式部署要求,Hadoop至少需要三台服务器,一台作为主节点,另外两台作为数据存储结点,其中一台作为数据备份节点。对于这三个节点,该如何选择服务器的配置呢?实际上,Hadoop一开始提出的初衷就是为了能够充分利用较低配置的服务器,甚至是台式机都可以作为节点,因此在实际部署时,并不需要配置太高的服务器,以下是小编推荐的几款美国服务器配置:


1. 主节点配置:

CPU : 两颗 Intel E5-2620V2

内存:8G DDR3

硬盘 : 60G SSD+1T SATA

带宽 : 10M独享

流量 : 不限流量

IP : 1个

默认操作系统 : centos 6.x 


主节点的配置还是要高一些,因为主节点在整个云计算平台起到核心作用。


2. 从节点配置

CPU : Intel E3-1230 V2

内存 : 8G

硬盘 : 60G SSD+1T SATA

带宽 : 10M独享

流量 : 不限流量

IP : 1个

默认操作系统 : centos 6.x 


在从节点中,可以使用配置低一些的服务器,因为在从节点主要起到存储的作用,在上面的配置中,硬盘大小可以根据实际需求进行定制。


上面的两款配置都配置了8G内存和60G SSD,60G SSD可以用来装系统,这将极大的加快了服务器的运行速度,8G的内存也能确保在节点中运行足够大型的程序。具体详情,可以参考:http://www.idccen.com/server/us.html


如果想在其他地区部署Hadoop云计算平台,比如英国,德国,香港等地方,则可以选择英国服务器、德国服务器、香港服务器,以下是参考链接:


英国服务器:http://www.idccen.com/server/en.html

德国服务器:http://www.idccen.com/server/de.html

香港服务器:http://www.idccen.com/server/hk.html





温馨提示:

技术咨询及售后问题请登陆后提交工单

全国24小时服务热线
0755-23770982
全国服务热线:0755-23770982