TiDB 的数据迁移工具现已开源

TiDB 是国内 PingCAP 团队开发的一个分布式 SQL 数据库，支持包括传统 RDBMS 和 NoSQL 的特性。现已将 DM（data migration platform，该数据迁移工具）开源。

该数据迁移工具遵循 Apache-2.0 开源协议，允许用户自由地使用及修改。

据介绍，DM (Data Migration) 是一体化数据同步任务管理平台，支持从 MySQL/MariaDB 到 TiDB 的数据迁移、全量备份和 MariaDB/MySQL binlog 增量同步，有助于减少 *** 作成本和简化错误处理流程。架构图如下所示：

从架构图可以看到，DM 包括三大组件：DM-master、DM-worker 和 dmctl。其中，DM-master 管理和调度数据同步任务的 *** 作、DM-worker 执行特定的数据同步任务、dmctl 则是控制 DM 集群的命令行工具。更详细的组件功能介绍，可以查阅官方文档。

TiKV 需要运行在 SSD 盘上，机械盘是难以支撑起 TiKV 这种 IO 负载密集的应用的。另外需要注意服务器的 IO scheduler 是否被设定为 noop / none，对于 SSD 和 NVME 设备来说简单的 noop 和 none 往往工作的更好。在不合理的 IO 调度器设置下当 RocksDB 发生后台 Compaction 时过高的 IO 延迟会对线上业务产生非常大的影响。

---