搭建Hadoop集群,一个月6T的数量需要几台服务器?

搭建Hadoop集群,一个月6T的数量需要几台服务器?,第1张

最好是两个做成HA。

6T的数据容量,看你副本数量设置是多少,一般默认为3,那么仅这些就需要18T硬盘,稍微大一点20T吧;这仅仅是HDFS存储,(这里我说的是一个月的,你数据保存几个月,就乘几倍)。

如果你集群上面要跑计算,MR计算出来的数据要保存HDFS的,所以,还是要根据你的结果数据来做判断,大小就看你计算任务了。

一般是这样计算硬盘大小:

(原始数据+中间数据+结果数据)副本数量=总硬盘大小

不知道你说的是不是
网站服务器
通常所用服务器的数量主要取决于你网站的访问量大小因为一台服务器的性能是有限的比如说一台高配置的服务器最多能满足每天一二十万的访问量如果你的网站访问量超过这个规模那么就需要利用多台服务器做
负载均衡
才可以而文件储存的多少主要是占据硬盘容量只要有足够大的硬盘就可以放足够多的文件
海腾数据
杨闯
为你解答希望对你有帮助


欢迎分享,转载请注明来源:内存溢出

原文地址: http://outofmemory.cn/zz/12976011.html

(0)
打赏 微信扫一扫 微信扫一扫 支付宝扫一扫 支付宝扫一扫
上一篇 2023-05-29
下一篇 2023-05-29

发表评论

登录后才能评论

评论列表(0条)

保存