在mysql中怎样做到查询结果中带内嵌对象

当分片索引不是纯整型的字符串时，只接受整型的内置 hash 算法是无法使用的。为此，stringhash 按照用户定义的起点和终点去截取分片索引字段中的部分字符，根据当中每个字符的二进制 unicode 值换算出一个长整型数值，然后就直接调用内置 hash 算法求解分片路由：先求模得到逻辑分片号，再根据逻辑分片号直接映射到物理分片。

用户需要在 rule.xml 中定义 partitionLength[] 和 partitionCount[] 两个数组和 hashSlice 二元组。

在 DBLE 的启动阶段，点乘两个数组得到模数，也是逻辑分片的数量

并且根据两个数组的叉乘，得到各个逻辑分片到物理分片的映射表（物理分片数量由 partitionCount[] 数组的元素值之和）

此外根据 hashSlice 二元组，约定把分片索引值中的第 4 字符到第 5 字符（字符串以 0 开始编号，编号 3 到编号 4 等于第 4 字符到第 5 字符）字符串用于 “字符串->整型”的转换

在 DBLE 的运行过程中，用户访问使用这个算法的表时，WHERE 子句中的分片索引值会被提取出来，取当中的第 4 个字符到第 5 字符，送入下一步

设置一个初始值为 0 的累计值，逐个取字符，把累计值乘以 31，再把这个字符的 unicode 值当成长整型加入到累计值中，如此类推直至处理完截取出来的所有字符，此时的累计值就能够代表用户的分片索引值，完成了 “字符串->整型” 的转换

对上一步的累计值进行求模，得到逻辑分片号

再根据逻辑分片号，查映射表，直接得到物理分片号

与MyCat的类似分片算法对比

请点击输入图片描述

两种算法在string转化为int之后，和 hash 分区算法相同，区别也继承了 hash 算法的区别。

开发注意点

【分片索引】1. 必须是字符串

【分片索引】2. 最大物理分片配置方法是，让 partitionCount[] 数组和等于 2880

例如：

<property name="partitionLength">1</property><property name="partitionCount">2880</property>

或

<property name="partitionLength">1,1</property><property name="partitionCount">1440,1440</property>

【分片索引】3. 最小物理分片配置方法是，让 partitionCount[] 数组和等于 1

例如

<property name="partitionLength">2880</property><property name="partitionCount">1</property>

【分片索引】4. partitionLength 和 partitionCount 被当做两个逗号分隔的一维数组，它们之间的点乘必须在 [1, 2880] 范围内

【分片索引】5. partitionLength 和 partitionCount 的配置对顺序敏感

<property name="partitionLength">512,256</property><property name="partitionCount">1,2</property>

和

<property name="partitionLength">256,512</property><property name="partitionCount">2,1</property>

是不同的分片结果

【分片索引】6. 分片索引字段长度小于用户指定的截取长度时，截取长度会安全减少到符合分片索引字段长度

【数据分布】1. 分片索引字段截取越长则越有利于数据均匀分布

【数据分布】2. 分片索引字段的内容重复率越低则越有利于数据均匀分布

运维注意点

【扩容】1. 预先过量分片，并且不改变 partitionCount 和 partitionLength 点乘结果，也不改变截取设置 hashSlice 时，可以避免数据再平衡，只需进行涉及数据的迁移

【扩容】2. 若需要改变 partitionCount 和 partitionLength 点乘结果或改变截取设置 hashSlice 时，需要数据再平衡

【缩容】1. 预先过量分片，并且不改变 partitionCount 和 partitionLength 点乘结果，也不改变截取设置 hashSlice 时，可以避免数据再平衡，只需进行涉及数据的迁移

【缩容】2. 若需要改变 partitionCount 和 partitionLength 点乘结果或改变截取设置 hashSlice 时，需要数据再平衡

配置注意点

【配置项】1. 在 rule.xml 中，可配置项为 <property name="partitionLength">  、<property name="partitionCount">和 <property name="hashSlice">

【配置项】2.在 rule.xml 中配置 <property name="partitionLength"> 标签

内容形式为：<物理分片持有的虚拟分片数>[,<物理分片持有的虚拟分片数>,...<物理分片持有的虚拟分片数>]

物理分片持有的虚拟分片数必须是整型，物理分片持有的虚拟分片数从左到右与同顺序的物理分片数对应，partitionLength 和partitionCount 的点乘结果必须在 [1, 2880] 范围内

【配置项】3. 在 rule.xml 中配置 <property name="partitionCount"> 标签内容形式为：<物理分片数>[,<物理分片数>,...<物理分片数>]

其中物理分片数必须是整型，物理分片数按从左到右的顺序与同顺序的物理分片持有的虚拟分片数对应，物理分片的编号从左到右连续递进，partitionLength 和 partitionCount 的点乘结果必须在 [1, 2880] 范围内

【配置项】4. partitionLength 和 partitionCount 的语义是：持有partitionLength[i] 个虚拟分片的物理分片有 partitionCount[i] 个

例如

<property name="partitionLength">512,256</property><property name="partitionCount">1,2</property>

语义是持有 512 个逻辑分片的物理分片有 1 个，紧随其后，持有 256 个逻辑分片的物理分片有 2 个

【配置项】5.partitionLength 和 partitionCount 都对书写顺序敏感，

例如

<property name="partitionLength">512,256</property><property name="partitionCount">1,2</property>

分片结果是第一个物理分片持有头512个逻辑分片，第二个物理分片持有紧接着的256个逻辑分片，第三个物理分片持有最后256个逻辑分片，相对的

<property name="partitionLength">256,512</property><property name="partitionCount">2,1</property>

分片结果则是第一个物理分片持有头 256 个逻辑分片，第二个物理分片持有紧接着的 256 个逻辑分片，第三个物理分片持有最后 512 个逻辑分片

【配置项】6.partitionLength[] 的元素全部为 1 时，这时候partitionCount 数组和等于 partitionLength 和 partitionCount 的点乘，物理分片和逻辑分片就会一一对应，该分片算法等效于直接取余

【配置项】7.在 rule.xml 中配置标签，从分片索引字段的第几个字符开始截取到第几个字符：

若希望从首字符开始截取 k 个字符（ k 为正整数），配置的内容形式可以为“ 0 : k ”、“ k ”或“ : k ”；

若希望从末字符开始截取 k 个字符（ k 为正整数），则配置的内容形式可以为“ -k : 0 ”、“ -k ”或“ -k : ”；

若希望从头第 m 个字符起算截取 n 个字符（ m 和 n 都是正整数），则先计算出 i = m - 1 和 j = i + n - 1，配置的内容形式为“ i : j ”；

若希望从尾第 m 个字符起算截取从尾算起的 n 个字符（ m 和 n 都是正整数），则先计算出 i = -m + n - 1，配置的内容形式可以为“ -m : i ”；

若希望不截取，则配置的内容形式可以为“ 0 : 0 ”、“ 0 : ”、“ : 0 ”或 “ : ”

先看结构体

－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－ 

 以下代码块是用来连接数据库的通讯过程，要连接MYSQL，必须建立MYSQL实例，通过mysql_init初始化方能开始进行连接.

typedef struct st_mysql {

 NET           net            /* Communication parameters */

 gptr          connector_fd   /* ConnectorFd for SSL */

 char          *host,*user,*passwd,*unix_socket,

                *server_version,*host_info,*info,*db

 unsigned int port,client_flag,server_capabilities

 unsigned int protocol_version

 unsigned int field_count

 unsigned int server_status

 unsigned long thread_id      /* Id for connection in server */

 my_ulonglong affected_rows

 my_ulonglong insert_id       /* id if insert on table with NEXTNR */

 my_ulonglong extra_info              /* Used by mysqlshow */

 unsigned long packet_length

 enum mysql_status status

 MYSQL_FIELD   *fields

 MEM_ROOT      field_alloc

 my_bool       free_me        /* If free in mysql_close */

 my_bool       reconnect      /* set to 1 if automatic reconnect */

 struct st_mysql_options options

 char          scramble_buff[9]

 struct charset_info_st *charset

 unsigned int server_language

} MYSQL

这个结构代表返回行的一个查询的(SELECT, SHOW, DESCRIBE, EXPLAIN)的结果。返回的数据称为“数据集”，用过数据库的朋友应该对数据库中查询后得到的结果集不会陌生，在C的API里对应的就是MYSQL_RES了，从数据库读取数据，最后就是从MYSQL_RES中读取数据。

typedef struct st_mysql_res {

 my_ulonglong row_count

 unsigned int field_count, current_field

 MYSQL_FIELD   *fields

 MYSQL_DATA    *data

 MYSQL_ROWS    *data_cursor

 MEM_ROOT      field_alloc

 MYSQL_ROW     row            /* If unbuffered read */

 MYSQL_ROW     current_row    /* buffer to current row */

 unsigned long *lengths       /* column lengths of current row */

 MYSQL         *handle        /* for unbuffered reads */

 my_bool       eof            /* Used my mysql_fetch_row */

} MYSQL_RES

 

－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－

再看函数：

 

C语言 *** 作mysql数据 常用函数

所需头文件： #include <mysql/mysql.h>

功能：  获得或初始化一个MYSQL结构

函数原型： MYSQL *mysql_init(MYSQL *mysql)

函数返回值： 一个被始化的MYSQL*句柄

备注：  在内存不足的情况下，返回NULL

所需头文件： #include <mysql/mysql.h>

函数功能： 关闭一个服务器连接，并释放与连接相关的内存

函数原型： void mysql_close(MYSQL *mysql)

函数传入值： MYSQL:类型的指针

函数返回值： 无

所需头文件： #include <mysql/mysql.h>

函数功能： 连接一个MySQL服务器

函数原型： MYSQL * mysql_connect(MYSQL *mysql,const char *host,const char *user,const char *passwd)

函数传入值： mysql表示一个现存mysql结构的地址

  host表示MYSQL服务器的主机名或IP

  user表示登录的用户名

  passwd表示登录的密码

函数返回值： 如果连接成功，一个MYSQL *连接句柄：如果连接失败，NULL

备注：  该函数不推荐，使用mysql_real_connect()代替

所需文件： #include <mysql/mysql.h>

函数功能： MYSQL *mysql_real_connect(MYSQL *mysql,const char *host,const char *user,const char *passwd,const char *db,unsigned int port,const char *unix_socket,unsigned int client_flag)

函数传入值： mysql表示一个现存mysql结构的地址

  host表示MYSQL服务器的主机名或IP

  user表示登录的用户名

  passwd表示登录的密码

  db表示要连接的数据库

  port表示MySQL服务器的TCP/IP端口

  unix_socket表示连接类型

  client_flag表示MySQL运行ODBC数据库的标记

函数返回值： 如果连接成功，一个MYSQL*连接句柄：如果连接失败，NULL

所需头文件： #include <mysql/mysql.h>

函数功能： 返回最新的UPDATE，DELETE或INSERT查询影响的行数

函数传入值： MYSQL:类型指针

函数返回值： 大于零的一个整数表示受到影响或检索出来的行数。零表示没有区配查序中WHERE子句的记录或目前还没有查询被执行-1表示查询返回一个错误，或对于一个SELECT查询

所需头文件： #include <mysql/mysql.h>

函数功能： 对指定的连接执行查询

函数原型： int mysql_query(MYSQL *mysql,const char *query)

函数传入值： query表示执行的SQL语句

函数返回值： 如果查询成功，为零，出错为非零。

相关函数： mysql_real_query

所需头文件： #include <mysql/mysql.h>

函数功能： 为无缓冲的结果集获得结果标识符

函数原形： MYSQL_RES *mysql_use_result(MYSQL *mysql)

函数传入值： MYSQL:类型的指针

函数返回值： 一个MYSQL_RES结果结构，如果发生一个错误发NULL

#incluee <mysql/mysql.h>

检索一个结果集合的下一行

MYSQL_ROW mysql_fetch_row(MYSQL_RES *result)

MYSQL_RES:结构的指针

下一行的一个MYSQL_ROW结构。如果没有更多的行可检索或如果出现一个错误，NULL

#include <mysql/mysql.h>

返回指定结果集中列的数量

unsigned int mysql_num_fields(MYSQL_RES *res)

MYSQL_RES 结构的指针

结果集合中字段数量的一个无符号整数

#include <mysql/mysql.h>

创建一个数据库

int mysql_create_db(MYSQL *mysql,const char *db)

MYSQL：类型的指针

db:要创建的数据库名

如果数据库成功地被创建，返回零，如果发生错误，为非零。

#include <mysql/mysql.h>

选择一个数据库

int mysql_select_db(MYSQL *mysql,const char *db)

MYSQL：类型的指针

db:要创建的数据库名

如果数据库成功地被创建，返回零，如果发生错误，为非零。 

－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－ 

再看例子： 

      很多人用到MySQL来开发一些项目，有时为了性能，我们会直接用C语言来开发相关的模块，尤其在我们的web应用中，虽然PHP、JSP等脚本均 提供了MySQL的接口，但是显然直接使用C语言具有更好的安全性和性能，Michael以前用PHP开发的多个项目中就使用了C语言编写的这类接口，然 后再编译到php里面，供php脚本直接使用,这方面的话题就不多说了，下面主要说一下在Linux下如何用C语言连接MySQL数据库，并且读取里面的 数据返回，同时如何进行编译。

这里的大部分代码参考了MySQL发行包里面的.c源文件，大家也可以去里面找找相关的代码，下面这段代码实现了连接到本地MySQL服务器上9tmd_bbs_utf8数据库，从数据表tbb_user中根据输入的userid取得该用户的用户名并打印输出到终端。

#if defined(_WIN32) || defined(_WIN64) //为了支持windows平台上的编译

#include <windows.h>

#endif

#include <stdio.h>

#include <stdlib.h>

#include "mysql.h"  //我的机器上该文件在/usr/local/include/mysql下

 

//定义数据库 *** 作的宏，也可以不定义留着后面直接写进代码

#define SELECT_QUERY "select username from tbb_user where userid = %d"

 

int main(int argc, char **argv) //char **argv 相当于 char *argv[]

{

    MYSQL mysql,*sock    //定义数据库连接的句柄，它被用于几乎所有的MySQL函数

    MYSQL_RES *res       //查询结果集，结构类型

    MYSQL_FIELD *fd      //包含字段信息的结构

    MYSQL_ROW row        //存放一行查询结果的字符串数组

    char qbuf[160]      //存放查询sql语句字符串

    

    if (argc != 2) { //检查输入参数

        fprintf(stderr,"usage : mysql_select <userid>\n\n")

        exit(1)

    }

    

    mysql_init(&mysql)

    if (!(sock = mysql_real_connect(&mysql,"localhost","dbuser","dbpwd","9tmd_bbs_utf8",0,NULL,0))) {

        fprintf(stderr,"Couldn't connect to engine!\n%s\n\n",mysql_error(&mysql))

        perror("")

        exit(1)

    }

    

    sprintf(qbuf,SELECT_QUERY,atoi(argv[1]))

    if(mysql_query(sock,qbuf)) {

        fprintf(stderr,"Query failed (%s)\n",mysql_error(sock))

        exit(1)

    }

    

    if (!(res=mysql_store_result(sock))) {

        fprintf(stderr,"Couldn't get result from %s\n", mysql_error(sock))

        exit(1)

    }

    

    printf("number of fields returned: %d\n",mysql_num_fields(res))

        

    while (row = mysql_fetch_row(res)) {

        printf("Ther userid #%d 's username is: %s\n", atoi(argv[1]),(((row[0]==NULL)&&(!strlen(row[0]))) ? "NULL" : row[0]))  

        puts( "query ok !\n" )  

    } 

    

    mysql_free_result(res)

    mysql_close(sock)

    exit(0)

    return 0   //. 为了兼容大部分的编译器加入此行

}

编译的时候，使用下面的命令

gcc -o mysql_select ./mysql_select.c -I/usr/local/include/mysql -L/usr/local/lib/mysql -lmysqlclient (-lz) (-lm) 后面两个选项可选，根据您的环境情况

运行的时候，执行下面的命令

./mysql_select 1

将返回如下结果：

number of fields returned: 1

Ther userid #1 's username is: Michael

query ok !

两种方法

1 在C中 调用system函数，执行mysql命令。

2 在C中，调用mysql的API ，也就是使用mysql接口库， 访问数据库。

后者更通用一些。

---