技术分享 | mysql 表数据校验

1. checksum table.

checksum table 会对表一行一行进行计算，直到计算出最终的 checksum 结果。

比如对表 n4 进行校验（记录数 157W，大小为 4G）

我自己笔记本上的测试结果，速度挺快。

不过checksum的限制比较多。罗列如下，

A、不能对视图进行校验。

B、字段顺序不同，校验结果也会不一致。

C、CHAR(100) 和 VARCHAR(100) 存储相同的字符，校验结果也会不一致。

D、在执行 checksum 同时，会对表所有行加共享读锁。

E、还有就是 MySQL 版本不同，有可能校验结果不一致。比如手册上说的， MySQL 5.6.5 之后的版本对时间类型的存储格式有变化，导致校验结果不一致。

那 checksum 的 限制这么多，我们是不是有其方法来突破所有限制呢？ 比如说可以模拟 checksum table 的原理来手工计算。

2. 自己计算 checksum 值。

这里用了 MySQL 自身的几个特性：session 变量；通用表达式；窗口函数以及 MySQL 的 concat_ws 函数。实现非常简单。

比如我们用 sha 函数来计算校验值。

如果在 MySQL 老版本运行，可以利用 MySQL 的黑洞引擎，改下 SQL 如下：

对于表要计算校验数据一致性的需求，首选第二种自己写 SQL 的方法。

package com.joinmysql.demo  

  

import java.sql.DriverManager  

import java.sql.ResultSet  

import java.sql.SQLException  

import java.sql.Connection  

import java.sql.Statement  

   

public class MysqlDemo {  

    public static void main(String[] args) throws Exception {  

        Connection conn = null  

        String sql  

        // MySQL的JDBC URL编写方式：jdbc:mysql://主机名称：连接端口/数据库的名称?参数=值  

        // 避免中文乱码要指定useUnicode和characterEncoding  

        // 执行数据库 *** 作之前要在数据库管理系统上创建一个数据库，名字自己定，  

        // 下面语句之前就要先创建javademo数据库  

        String url = "jdbc:mysql://localhost:3306/test?user=root&password=jiangwei&useUnicode=true&characterEncoding=UTF8"  

        try {  

            // 之所以要使用下面这条语句，是因为要使用MySQL的驱动，所以我们要把它驱动起来，  

            // 可以通过Class.forName把它加载进去，也可以通过初始化来驱动起来，下面三种形式都可以  

            Class.forName("com.mysql.jdbc.Driver")// 动态加载mysql驱动  

            // or:  

            // com.mysql.jdbc.Driver driver = new com.mysql.jdbc.Driver()  

            // or：  

            // new com.mysql.jdbc.Driver()  

   

            System.out.println("成功加载MySQL驱动程序")  

            // 一个Connection代表一个数据库连接  

            conn = DriverManager.getConnection(url)  

            // Statement里面带有很多方法，比如executeUpdate可以实现插入，更新和删除等  

            Statement stmt = conn.createStatement()  

            sql = "create table student(NO char(20),name varchar(20),primary key(NO))"  

            int result = stmt.executeUpdate(sql)// executeUpdate语句会返回一个受影响的行数，如果返回-1就没有成功  

            if (result != -1) {  

                System.out.println("创建数据表成功")  

                sql = "insert into student(NO,name) values('2012001','陶伟基')"  

                result = stmt.executeUpdate(sql)  

                sql = "insert into student(NO,name) values('2012002','周小俊')"  

                result = stmt.executeUpdate(sql)  

                sql = "select * from student"  

                ResultSet rs = stmt.executeQuery(sql)// executeQuery会返回结果的集合，否则返回空值  

                System.out.println("学号\t姓名")  

                while (rs.next()) {  

                    System.out.println(rs.getString(1) + "\t" + rs.getString(2))// 入如果返回的是int类型可以用getInt()  

                }  

            }  

        } catch (SQLException e) {  

            System.out.println("MySQL *** 作错误")  

            e.printStackTrace()  

        } catch (Exception e) {  

            e.printStackTrace()  

        } finally {  

            conn.close()  

        }  

   

    }  

   

}

从mysql数据库表中随机获取数据 其实，从数据库随机获取数据，很简单，只须用到一个rand()函数select * from table_name order by rand() limit 0,5下面是一个小实例：从文章表中随机获取5条数据。$dblink=mysql_connect("localhost","root","123456")mysql_query("set names utf8")mysql_select_db("aixuexi") $sql="select * from waxx_article order by rand() limit 0,5" $rs=mysql_query($sql) while($row=mysql_fetch_array($rs)){$rows[]=$row } if($rows){foreach($rows as $v){?><div style="width:350pxheight:35pxline-height:35pxborder:1px solid #ccc"><?php echo $v['title']?></div><?php} }else{ echo "暂无文章" }

---