数据迁移的数据迁移的技术准备

数据转换与迁移通常包括多项工作：旧系统数据字典整理、旧系统数据质量分析、新系统数据字典整理、新旧系统数据差异分析、建立新旧系统数据之问的映射关系、开发部署数据转换与迁移程序、制定数据转换与迁移过程中的应急方案、实施旧系统数据到新系统的转换与迁移工作、检查转换与迁移后数据的完整性与正确性。
数据转换与迁移的过程大致可以分为抽取、转换、装载三个步骤。数据抽取、转换是根据新旧系统数据库的映射关系进行的，而数据差异分析是建立映射关系的前提，这其中还包括对代码数据的差异分析。转换步骤一般还要包含数据清洗的过程，数据清洗主要是针对源数据库中，对出现二义性、重复、不完整、违反业务或逻辑规则等问题的数据进行相应的清洗 *** 作；在清洗之前需要进行数据质量分析，以找出存在问题的数据，否则数据清洗将无从谈起。数据装载是通过装载工具或自行编写的SQL程序将抽取、转换后的结果数据加载到目标数据库中。
对数据的检查包括以下6个方面。
(1)数据格式检查。检查数据的格式是否一致和可用，目标数据要求为number型。
(2)数据长度检查。检查数据的有效长度，对于char类型的字段转换到varchar类型中，需要特别关注。
(3)区间范围检查。检查数据是否包含在定义的最大值和最小值的区间中。例如年龄为300或录入日期为4000—1—1显然有问题。
(4)空值、默认值检查。检查新旧系统定义的空值、默认值是否相同，不同数据库系统对空值的定义可能不同，需要特别关注。
(5)完整性检查。检查数据的关联完整性。如记录引用的代码值是否存在，特别需要注意的是有些系统在使用一段时间后，为了提高效率而去掉了外键约束。
(6)一致性检查。检查逻辑上是否存在违反一致性的数据，特别是存在分别提交 *** 作的系统。

数据迁移(又称分级存储管理，hierarchical storage management，hsm)是一种将离线存储与在线存储融合的技术。它将高速、高容量的非在线存储设备作为磁盘设备的下一级设备，然后将磁盘中常用的 数据按指定的策略自动迁移到磁带库（简称带库）等二级大容量存储设备上。当需要使用这些数据时，分级存储系统会自动将这些数据从下一级存储设备调回到上一 级磁盘上。对于用户来说，上述数据迁移 *** 作完全是透明的，只是在访问磁盘的速度上略有怠慢，而在逻辑磁盘的容量上明显感觉大大提高了。
数据迁移是将很少使用或不用的文件移到辅助存储系统(如磁带或光盘)的存档过程。这些文件通常是需在未来任何时间可进行方便访问的图像文档或历史信息。迁移工作与备份策略相结合,并且仍要求定期备份。还包括电脑数据迁移，迁移旧电脑（旧系统）中的数据、应用程序、个性化设置等到新电脑（新系统），在系统升级后很有必要。
对数据的检查包括以下6个方面。
(1)数据格式检查。检查数据的格式是否一致和可用，目标数据要求为number型。
(2)数据长度检查。检查数据的有效长度，对于char类型的字段转换到varchar类型中，需要特别关注。
(3)区间范围检查。检查数据是否包含在定义的最大值和最小值的区间中。例如年龄为300或录入日期为4000—1—1显然有问题。
(4)空值、默认值检查。检查新旧系统定义的空值、默认值是否相同，不同数据库系统对空值的定义可能不同，需要特别关注。
(5)完整性检查。检查数据的关联完整性。如记录引用的代码值是否存在，特别需要注意的是有些系统在使用一段时间后，为了提高效率而去掉了外键约束。
(6)一致性检查。检查逻辑上是否存在违反一致性的数据，特别是存在分别提交 *** 作的系统。

随着虚拟桌面系统基础架构的出现，正如老话所说的那样，旧有的事物又重新焕发出新的生机。应用虚拟化技术，目前的IT将具备将那些各不相同的计算平台重新统一管理的能力，还能为管理员提供更好的控制和用户访问的灵活性。本文对虚拟桌面系统基础架构的回顾将侧重于两大最为重要的虚拟化产品的特性分析。在笔者对入门级虚拟桌面系统基础架构解决方案（即Kaviza VDI-in-a-box, NComputing vSpace和Pano Logic's Pano Express）所做的对比中，笔者的目标是关注那款能在思杰XenDesktop 55和 VMware View 5的基础上最高托管50个用户配置出一套完整的虚拟桌面系统基础架构解决方案。在笔者的评估中，笔者发现配置的集中化管理是比较容易的。XenDesktop和View都是基于相似的构建模块，因此展开配置的整个路线规划图都是相同的。不过要完成整个配置还需要花费更多的心思和努力。 XenDesktop和View着两款产品都是可托管数千个用户的高扩展、高配置平台。在与Kaviza, Ncomputing和Pano Logic解决方案进行对比时，XenDesktop和View需要花费更多的时间，精力和知识才能配置成功和运行。但是对于要继续成长壮大并且需要管理大量虚拟桌面系统用户的企业用户来说，XenDesktop和View是唯一的选择（需要强调的是，思杰在2011年初收购了Kaviza来提供入门级虚拟桌面系统基础架构产品）。虚拟桌面系统基础架构的优势和不足对桌面系统部署虚拟化并将其迁移到集中管理的服务器上有很多的好处。首先，可以避免数据中心的用户数据泄漏。所有的计算处理都是在高冗余系统上的可控环境中进行的。从安全和容错的角度来说，这是一个很大的亮点。与数据存储的传统桌面系统不同（在这种环境中，数据可能会被盗或者遗失），统一管理可以避免数据中心数据的丢失。另一个好处是系统管理也是统一进行的。当到了对 *** 作系统打补丁或者升级一款应用软件的时候，IT管理者可以在主机或者硬盘映像上完成这项工作，所有的用户都会收到升级信息，再也不用对企业内部的每个桌面系统单独进行升级了。或许虚拟桌面系统基础架构解决方案最大的好处是让用户的桌面系统环境可以供多个最终用户设备使用的能力。这就意味着一个Windows 7虚拟桌面系统可以通过Mac或者LINUX PC，从瘦客户端，iPad或者安卓上网本，甚至通过智能手机来访问。用户的桌面系统变得完全便携了。

服务器虚拟化的数据类型对数据迁移的影响重大。通常来讲，非结构化数据更易于迁移，通过文件系统复制或备份恢复就能够渐进完成迁移过程。而结构化数据的处理就很棘手：类似于数据库这样的数据类型通常一直处于使用状态，因此渐进式的迁移过程就难以实现。大多数情况下，任务关键数据库往往配置为高可用集群。而在这种情形下，虚拟单个数据库集群结点，创建单个客户集群主要有这样两个考虑：如果你的hypervisor提供支持，你需要设置规则防止客户节点宿主在物理主机上，否则主机失败理论上可能导致数据库失败。尽管数据库节点能够处理不同hypervisor的节点失败，但这样做你将有更大几率保持数据库在线。数据库故障恢复节点鲜少会存储数据本身。这些节点通常会关联到一个集群共享卷，你需要处理这些数据。你可以把数据存放于原有位置，但必须考虑到hypervisor的一些专有限制。

---