搭建Hadoop集群,一个月6T的数量需要几台服务器?

搭建Hadoop集群,一个月6T的数量需要几台服务器?,第1张

最好是两个做成HA。

6T的数据容量,看你副本数量设置是多少,一般默认为3,那么仅这些就需要18T硬盘,稍微大一点20T吧;这仅仅是HDFS存储,(这里我说的是一个月的,你数据保存几个月,就乘几倍)。

如果你集群上面要跑计算,MR计算出来的数据要保存HDFS的,所以,还是要根据你的结果数据来做判断,大小就看你计算任务了。

一般是这样计算硬盘大小:

(原始数据+中间数据+结果数据)副本数量=总硬盘大小

香港站群服务器的 IP 通常都是同子网掩码,同个子网掩码不同 C 段总数小于 256 个,因此不管多少个 C 段 IP,同一个子网掩码下 IP 数量就会少于 256 个,而当前还没出现过不同掩码的香港站群服务器。
由此看来,理论上来讲香港站群服务器的 IP 数量不受限,但是实际还是要看 IDC 服务商的分配,通常情况下香港站群服务器的 IP 数量都会少于 256 个。


欢迎分享,转载请注明来源:内存溢出

原文地址: http://outofmemory.cn/zz/13491223.html

(0)
打赏 微信扫一扫 微信扫一扫 支付宝扫一扫 支付宝扫一扫
上一篇 2023-08-17
下一篇 2023-08-17

发表评论

登录后才能评论

评论列表(0条)

保存