问题本身的含义是指将'11100401601 '这个字符转换为int时越界了。就是说大于int能表示的最大值范围了。首先要确定字符串所表示的数字本身是否正确,是不是写错了某个字符。其次就是别强转成int,SQL里还有其他的数字类型,比如decimal什么的。看你的需要了。但是如果你要插入一张已有表,并且里面本来就有这种数据,你就完全可以使用sp_help+表名称这个命令来看看原表中的数据类型,然后强制转换成一致的。1 部署zabbix等开源分布式监控系统,获取每天的数据库的io,cpu,连接数
2 部署每周性能统计,包含数据增加量,iostat,vmstat,datasize的情况
3 Mysql slowlog收集,列出top 10(1)服务器工作负荷加大,资源不够用,如用户数增多了,增加了大型的服务器或者应用软件,如Exchange\SQL服务器软件,或者是大型的流媒体制作软件等
(2)网络用户通过服务器下载或者执行大型的应用程序,或者传输大容量的文件或视频等
(3)计算机病毒,如蠕虫病毒是最耗资源的它不仅会大量消耗服务器磁盘资源,而会消耗大量的服务器CPU和内存资源,建议采用网络牒杀病毒软件对整个网络进行同步杀病毒。网络版杀病毒软件的具体部署方法参见笔者的《网管员必读——网络安全》一书。
(4)服务器配置不正确,特别是像DNS\WINS服务器之间的复制关系配置,造成用户名称解析困难
(5)服务器网卡\网线,或者所连的交换机端口性能变差,建议分别更换进行测试有事情干的时候,如果Sleep时间太长,就会导致有足够的CPU,却不干活。查一下有没有什么地方使用到了遍历。如果有存在就需要进行优化。有一个程序,一个数组也不大,也就五十个元素,但是当多次调用的时候,由于遍历,明显导致CPU无故地被占用在遍历过程当中。另外一个就是多线程当中的同步。线程并不是越多越好,线程越多所导致的碰撞越大,反倒会阻碍其它线程的工作。
我们先来看第一个阶段,MySQL慢的诊断思路,一般我们会从三个方向来做:
第一个方向是MySQL内部的观测
第二个方向是外部资源的观测
第三个方向是外部需求的改造
11 MySQL 内部观测
我们来看MySQL内部的观测,常用的观测手段是这样的,从上往下看,第一部分是Processlist,看一下哪个SQL压力不太正常,第二步是explain,解释一下它的执行计划,第三步我们要做Profilling,如果这个SQL能再执行一次的话, 就做一个Profilling,然后高级的DBA会直接动用performance_schema ,MySQL 57 以后直接动用sys_schema,sys_schema是一个视图,里面有便捷的各类信息,帮助大家来诊断性能。再高级一点,我们会动用innodb_metrics进行一个对引擎的诊断。
除了这些手段以外,大家还提出了一些乱七八糟的手段,我就不列在这了,这些是常规的一个MySQL的内部的状态观测的思路。除了这些以外,MySQL还陆陆续续提供了一些暴露自己状态的方案,但是这些方案并没有在实践中形成套路,原因是学习成本比较高。
12 外部资源观测
外部资源观测这部分,我引用了一篇文章,这篇文章的二维码我贴在上面了。这篇文章是国外的一个神写的,标题是:60秒的快速巡检,我们来看一下它在60秒之内对服务器到底做了一个什么样的巡检。一共十条命令,这是前五条,我们一条一条来看。
1uptime,uptime告诉我们这个机器活了多久,以及它的平均的负载是多少。
2dmesg -T | tail,告诉我们系统日志里边有没有什么报错。
3vmstat 1,告诉我们虚拟内存的状态,页的换进换出有没有问题,swap有没有使用。
4 mpstat -P ALL,告诉我们CPU压力在各个核上是不是均匀的。
5pidstat 1,告诉我们各个进程的对资源的占用大概是什么样子。
我们来看一下后五条:
首先是iostat-xz 1,查看IO的问题,然后是free-m内存使用率,之后两个sar,按设备网卡设备的维度,看一下网络的消耗状态,以及总体看TCP的使用率和错误率是多少。最后一条命令top,看一下大概的进程和线程的问题。
这个就是对于外部资源的诊断,这十条命令揭示了应该去诊断哪些外部资源。
13 外部需求改造
第三个诊断思路是外部的需求改造,我在这里引用了一篇文档,这篇文档是MySQL的官方文档中的一章,这一章叫Examples of Common Queries,文档中介绍了常规的SQL怎么写, 给出了一些例子。文章的链接二维码在slide上。
我们来看一下它其中提到的一个例子。
它做的事情是从一个表里边去选取,这张表有三列,article、dealer、price,选取每个作者的最贵的商品列在结果集中,这是它的最原始的SQL,非常符合业务的写法,但是它是个关联子查询。
关联子查询成本是很贵的,所以上面的文档会教你快速地把它转成一个非关联子查询,大家可以看到中间的子查询和外边的查询之间是没有关联性的。
第三步,会教大家直接把子查询拿掉,然后转成这样一个SQL,这个就叫业务改造,前后三个SQL的成本都不一样,把关联子查询拆掉的成本,拆掉以后SQL会跑得非常好,但这个SQL已经不能良好表义了,只有在诊断到SQL成本比较高的情况下才建议大家使用这种方式。
为什么它能够把一个关联子查询拆掉呢?
这背后的原理是关系代数,所有的SQL都可以被表达成等价的关系代数式,关系代数式之间有等价关系,这个等价关系通过变换可以把关联子查询拆掉。
上面的这篇文档是一个大学的教材,它从头教了关于代数和SQL之间的关系。然后一步步推导怎么去简化这句SQL。
第一,MySQL本身提供了很多命令来观察MySQL自身的各类状态,大家从上往下检一般能检到SQL的问题或者服务器的问题。
第二,从服务器的角度,我们从巡检的脚本角度入手,服务器的资源就这几种,观测手法也就那么几种,我们把服务器的资源全部都观察一圈就可以了。
第三,如果实在搞不定,需求方一定要按照数据库容易接受的方式去写SQL,这个成本会下降的非常快,这个是常规的MySQL慢的诊断思路。
欢迎分享,转载请注明来源:内存溢出
评论列表(0条)