产品型号:ZI2TS5-6636J
产品类型:双路六核塔式服务器
处 理 器:Xeon E5-2603
V3
内 存:8G DDR4 REG ECC4
硬 盘:HD SATA3 2T+SSD 120G2+SSD240G
产品地址:>很差了,首先处理器已经到E5-2600V4 系列了,E5-2430已经停产,以后报修都有问题,内存已经支持DDR4 REG ECC 2133MHz的内存条了,ECC只用于低端服务器。你可以参考正睿的这款产品型号:ZI21S6-6632
产品类型:双路六核机架式服务器
处 理 器:Xeon E5-2603
V4
内 存:8G DDR4 REG ECC×8或32G×2
硬 盘:HD SATA3 1TB
机 构:1U机架式
相信大部分做数据的童鞋们都会遇到数据倾斜,数据倾斜会发生在数据开发的各个环节中,比如:
1用Hive算数据的时候reduce阶段卡在9999%
2用SparkStreaming做实时算法时候,一直会有executor出现OOM的错误,但是其余的executor内存使用率却很低。
3这些问题经常会困扰我们,辛辛苦苦等了几个小时的数据就是跑不出来,心里多难过啊。
为什么要突出这么大数据量?先说一下笔者自己最初对数据量的理解:
数据量大就了不起了?数据量少,机器也少,计算能力也是有限的,因此难度也是一样的。凭什么数据量大就会有数据倾斜,数据量小就没有?
这样理解也有道理,但是比较片面,举两个场景来对比:
公司一:总用户量1000万,5台64G内存的的服务器。
公司二:总用户量10亿,1000台64G内存的服务器。
两个公司都部署了Hadoop集群。假设现在遇到了数据倾斜,发生什么?
1公司一的数据分析师在做join的时候发生了数据倾斜,会导致有几百万用户的相关数据集中到了一台服务器上,几百万的用户数据,说大也不大,正常字段量的数据的话64G还是能轻松处理掉的。
2公司二的数据分析师在做join的时候也发生了数据倾斜,可能会有1个亿的用户相关数据集中到了一台机器上了(相信我,这很常见)。这时候一台机器就很难搞定了,最后会很难算出结果。
下面会分几个场景来描述一下数据倾斜的特征,方便读者辨别。由于Hadoop和Spark是最常见的两个计算平台,下面就以这两个平台说明。
Hadoop中直接贴近用户使用使用的时Mapreduce程序和Hive程序,虽说Hive最后也是用MR来执行(至少目前Hive内存计算并不普及),但是毕竟写的内容逻辑区别很大,一个是程序,一个是Sql,因此这里稍作区分。
具体表现:
Hadoop中的数据倾斜主要表现在: Reduce阶段卡在9999%,一直不能结束。
这里如果详细的看日志或者和监控界面的话会发现:
Spark中的数据倾斜也很常见,这里包括Spark Streaming和Spark Sql,表现主要有下面几种:
我在内存7元1g(二手)的时候,上了84g内存(双路服务器主板,18根内存槽,几乎插满,内存是二手ecc ddr3服务器内存),分了60g内存虚拟一个硬盘,把 游戏 拷贝到这个内存硬盘上,不管是刚开始 游戏 还是复活重新载入,那速度连ssd都望尘莫及,目前大型 游戏 容量越来越大,60g快不够用了,等二手内存再降到7元/g的时候,再加64g内存。最遗憾的是,目前没有厂商开发由锂电池供电的民用内存硬盘扩展卡,虚拟的内存硬盘不能安装常规软件, *** 作系统也不能安装在内存硬盘上,不然系统会飞起来,什么ssd都是浮云。
当然,我这个是特殊情况,没有多少人会做垃圾佬,没有全新内存能做到10元/g以下的价格,对于大多数人来说,64g确实过剩了,按目前的软件容量,24g足够使用。
但在有条件的前提下,内存还是多多益善,从理论上来说内存从来不会嫌多,只是软件使用内存不够多而已。
现在Windows 10企业版可以支持128G内存,但对于普通消费者来说,64G内存没必要,有点资源浪费。
从理论上来说,电脑内存越大,运行速度越快。在实际应用中, *** 作系统能够支持64G的内存,但有一些应用软件并不支持。所以,盲目的上64G内存是没有必要的。
一台电脑的运行速度,并不取决于内存这一个硬件的规格,而是CPU、硬盘、内存等多个硬件工作要协调。 比如,一台电脑配了64G内存,还在用机械硬盘,数据传输肯定会有瓶颈,这样电脑速度也不快。
除此之外,大内存也要配合适的 *** 作系统。虽说Windows 7专业版也支持64G内存,但对于大内存管理方面,Windows 10系统更好一些。
目前,家庭电脑上所使用的应用软件,8G或16G就可以流畅运行了,64G内存没必要。当然了,如果手头不差钱,64G内存的效果肯定更好。
看你电脑的用途是干什么。
如果是普通办公(word,打印,几千行的Excel之类),8G内存足矣。
如果是 游戏 玩家,一般情况下16G(双通道8G2)也就够了。
如果是土豪 游戏 玩家,可能会上32G内存,但是这一般对应的都是几万甚至十几万的超级土豪电脑。
如果电脑是专业用途(制图、渲染、建模等),电脑可能会上16G到32G的内存,但是这种电脑一般也很贵。
64G内存的电脑,说实话以我的水平还真想不到。也许是那种一台单机支撑起一个服务的服务器可能会用到?一般个人使用,绝对不会用到这么大的内存的。
当然不差钱的话,内存随便加。不过我个人感觉,如果不差钱的话,把钱加到外设上,购买一套好的键盘鼠标、电脑桌椅、声卡音响、三联显示器等等,岂不是更好。
现阶段除了少数特殊情况下,64G内存对于普通用户来说已经非常过剩了,毕竟目前的主流电脑内存容量不过才8G-16G,16G以上的内存使用率就已经很少了,更别说高达64G的内存容量了,如果只是日常使用和 游戏 娱乐 恐怕只能用到30%左右的内存容量,绝大部分内存都被闲置浪费了。
普通电脑用户对内存需求最大的一般就是 游戏 了,但是目前即使是最新的大型3A 游戏 也很难用到超过12G的内存,即使那些主播喜欢一边直播一边 游戏 ,16G左右的内存也基本够用,除了 游戏 娱乐 以外,图形创作和视频编辑对内存需求量更高,像PS和PR都属于吃内存的大户,但是大部分创作者最多32G左右的内存就很充裕了,远远用不到超过64G的内存容量。
所以对大部分人来说,64G的内存容量堪称海量,大概只有服务器和复杂的特效需要用到64G甚至更多的内存,可以说我们绝大部分人在现在和未来很长一段时间都不会用到64G的内存,64G内存目前只适用于极少数的专业领域为企业和大数据服务,目前最主流的内存容量仍然是8-16G。
内存容量虽说对电脑性能和流畅度很重要,但是当内存容量过大只会产生浪费,不会对性能有任何帮助,现在单条8G 2400内存价格大约在300多元,如果配上64G内存至少也是数千元的花费,与其还不如把这些钱投入到CPU和显卡等配件上,因为这样都能得到一个非常明显的提升。
电脑安装64g的运行内存是否会过剩?
还是用实际的使用情况来进行对比
我使用的是Z400单路工作站
CPU使用的是w3690六核心12线程,最大睿平接近40g鲁大师 娱乐 得分基本是在八万
就以现在目前安装的纯e cc160016g运行内存来讲,如果只是用来玩 游戏 16g的运行内存完全是足够使用即便是大型3D 游戏
所以安装64g运行内存对于普通用户来讲,基本是没有什么作用,除非你电脑配置的是3200赫兹的内存条,用软件划分出来当做固态硬盘使用,那么这样的读写速度是高于普通的固态硬盘,读写速度能够部分提升电脑,整体运行速度。
不过这样的价格,不如直接买PCI512g固态硬盘更划算,可以是小内存将固态硬盘划分,虚拟内存使用因为固态硬盘的读写速度要高于普通内存条,读写速度。
电脑要是用来做渲染或者是3D建模,大内存是有必要的因为大型数据处理后台占用程序比较多,如果内存不足,可能会导致数据处理失败,或者是缓慢的现象
就以安装模拟器运行 游戏 多开为题
16g的运行内存多开模拟器八开运行3D 游戏 手游16g的运行内存基本占用70%左右如果硬盘没有划分大的缓存区也就是虚拟内存,运行时间超过一天就会偶尔出现提示系统内存不足的现象,要是十开模拟器别说是运行一天可能几个小时就会造成运行内存不足,基本配置至少是在24g的运行内存
再来用多开诛仙 游戏 ,双路x5690,64g运行内存,512g固态硬盘或者是256g固态硬盘进行阵列,再加上优化软件基本后台程序可以最多运行75开甚至80开,需要安装双千M网卡,避免造成数据上传不足,端口掉线的情况
大的内存适合与数据处理,多线程任务处理,普通电脑别说是64g运行内存16g足矣
你说的这个情况我大体归类了以下几种情况:
1普通办公电脑:如果只是文字录入型电脑4g内存就够,如果牵扯到思维导图图等稍微复杂点的办公环境8g都富裕的。
2多媒体电脑:这种情况多见于大公司有钱的公司给普通员工用的电脑一般8g内存作为普通电脑,大公司的办公环境复杂,牵扯到的数据也多,如果是有单独设计部门,而且牵扯到短视频制作,那么有那么一两台16g的电脑也无可厚非。
3 娱乐 性电脑: 娱乐 游戏 电脑跨度很大的,这个需要看玩儿什么 游戏 ,最少16g还是要的,要是像F1模拟这种 游戏 ,配上个32g也不是啥问题,吃内存的不只是 游戏 本身,还有系统运行用到的内存,当然如果玩儿更大 游戏 不仅仅是内存问题,还牵扯到显卡CPU,还有专门的 游戏 主板,这个时候内存肯定要跟上,上个64g内存甚至128g内存都没毛病。
4专业型电脑:此类电脑比如服务器和工作站,我知道的影音工作站,内存用到256g也都很正常,这类电脑配置比玩儿 游戏 配置都要好,但是真要是用来玩儿 游戏 可能会出现很多问题,比如我组装的视频工作站用的cpu是至强e5,用的p5000的专业视频显卡,64g内存,技嘉设计用主板,1tb的固态m2硬盘,但是玩儿起F1 游戏 来不算顺畅,比起同样价格用的 游戏 专业件组装的电脑就差了一截。原因是cpu主板显卡都是专业性比较强的,都是为了追求稳定专项性而配置的。打个比方,你非要让顶级焊工干顶级木匠的活,能干嘛能干,专业吗?不专业。
所以兄弟,就看你干什么用,我是不玩儿 游戏 的,但是我自己的电脑就是64g内存,公司影音工作站就是256g内存,调色渲染大,我的64g内存电脑就有点带不动了。
没太大必要,普通用户大多都在8g-16g之间(老电脑除外,豪与“无脑插满”不算普通用户),16g基本能满足90%的需求,如果不能忍忍就过去了( 游戏 除外)。那些大内存都是服务器、工作站,还有是做设计、视频、制图、虚拟机什么的(还有啥?其实我也不知道)相关工作的,但这些职业也都有相当的电脑基础,都会知道自己的工作量需要多大的内存。不过大内存也有好多玩法,比如分出来一些做为小容量“硬盘”,能分盘符的那种。把系统考进去、把软件考进去,速度超快的你好
在当前的情况下 你先判断你的系统使用时占用内存为多少!!!或许你不懂 我打个比方吧 我们家用电脑本来是安装内存为4GB 当安装了一个WIN7系统后可用内存只有31GB多。也就是讲,WIN7占用的内存是09GB 你的系统是不是占用了8GB了?
当然也请看看你的内存是不是同品牌的内存条 同频率 是不是有某根内存条存在不稳定或颗粒物存在不稳定
欢迎分享,转载请注明来源:内存溢出
评论列表(0条)