简单的理解,云存储就是一大堆存储设备通过交互式应用和集群技术整合在一起,通过一个统一的界面给用户提供存储服务。
至于你说的那个重复文件的删除技术,我不是太了解云里面是如何 *** 作的,不过很多公司局域网已经大量使用了类似的技术。比如windows 2012里面就有类似的功能,把一个文件分成若干大小不等的快,重复的就删除掉,我公司的文件服务器通过这种方式可以节约35%以上的磁盘空间。
本帖最近评分记录
冰封心事 无忧币 +6 热心广援 2013-9-24 20:28
网络工程师高手养成记>>
灰色渡鹤影
助理工程师
帖子
120
精华
0
无忧币
95
他的博客
他的下载
他的学院
发短消息
发表于 2013-9-24 15:04 | 来自 51CTO网页
[只看他] 6#
文章来源:
>
我们仍然使用两个会话,一个会话 run,用于运行主 SQL;另一个会话 ps,用于进行 performance_schema 的观察:
主会话线程号为 29,
将 performance_schema 中的统计量重置,
临时表的表大小限制取决于参数 tmp_table_size 和 max_heap_table_size 中较小者,我们实验中以设置 max_heap_table_size 为例。
我们将会话级别的临时表大小设置为 2M(小于上次实验中临时表使用的空间),执行使用临时表的 SQL:
查看内存的分配记录:
会发现内存分配略大于 2M,我们猜测临时表会比配置略多一点消耗,可以忽略。
查看语句的特征值:
可以看到语句使用了一次需要落磁盘的临时表。
那么这张临时表用了多少的磁盘呢?
我们开启 performance_schema 中 waits 相关的统计项:
重做实验,略过。
再查看 performance_schema 的统计值:
可以看到几个现象:
1 临时表空间被写入了 792MiB 的数据。
2 这些数据是语句写入后,慢慢逐渐写入的。
来看看这些写入 *** 作的特征,该方法我们在 实验 03 使用过:
可以看到写入的线程是 page_clean_thread,是一个刷脏 *** 作,这样就能理解数据为什么是慢慢写入的。
也可以看到每个 IO *** 作的大小是 16K,也就是刷数据页的 *** 作。
结论:
我们可以看到,
1 MySQL 会基本遵守 max_heap_table_size 的设定,在内存不够用时,直接将表转到磁盘上存储。
2 由于引擎不同(内存中表引擎为 heap,磁盘中表引擎则跟随 internal_tmp_disk_storage_engine 的配置),本次实验写磁盘的数据量和 实验 05 中使用内存的数据量不同。
3 如果临时表要使用磁盘,表引擎配置为 InnoDB,那么即使临时表在一个时间很短的 SQL 中使用,且使用后即释放,释放后也会刷脏页到磁盘中,消耗部分 IO。
1服务器内存主要是用来存储临时数据,做缓存用的。服务器系统本身所占的内存比较少,内存需要消耗的大小,取决于你服务器里跑的应用程序。理论上来说内存越大越好,可以将更多的临时数据放到内存里面,避免直接读硬盘,毕竟读内存的速度要比读硬盘的速度快很多,但从经济的角度来看,够用就好了,
多了,服务器也用不上,放在那里浪费。
2制约服务器性能的因素,不同应用可能存在的瓶颈是不同的,有的要重点考虑处理器、内存,有的要重点考虑硬盘或网络的I/O吞吐能力;
通讯服务器(messaging/E-mail/VOD):快速的I/O是这类应用的关键,硬盘的I/O吞吐能力是主要瓶颈;
数据仓库(联机事务处理/数据挖掘):大型商业数据存储、编目、索引、数据分析,高速商业计算等,需要具有良好的网络和硬盘I/O吞吐能力;
数据库(ERP/OLTP等):服务器运行数据库,需要具有强大的CPU处理能力,大的内存容量来缓存数据,同时需要有很好的I/O吞吐性能;
其他应用:应用集中在数据查询和网络交流中,需要频繁读写硬盘,这时硬盘的性能将直接影响服务器整体的性能。
3如果楼主的服务器只是跑普通的网页程序的话,2G是绝对够用的,如果里面跑的应用系统比较多,
例如一部服务器里运行数据库,论坛,前台网站等等。而网站里面的,和视频比较多的话,就要根据服务器负担来适当增加内存。数据库服务器依赖于存储服务器的数据,这意味着数据库数据文件被放置在存储服务器上。
数据以记录的形式存储在数据库中;数据库将数据作为文件存储在存储服务器上。
数据库服务器由在局域网和数据库管理系统软件中运行的一台或多台计算机组成,数据库服务器为客户端应用程序提供数据服务。存储服务器是为特定目标设计的,因此配置也不同。它可能是一个稍有额外存储空间的服务器,或者它可能有很多存储空间。
欢迎分享,转载请注明来源:内存溢出
评论列表(0条)