数据迁移前的准备与规划：实现无缝迁移与锁屏策略的兼顾
一、引言
随着信息技术的快速发展，数据迁移已成为企业成长和业务拓展过程中不可或缺的一环。
数据迁移涉及数据的整理、转换、传输和存储等各个环节，对于企业和组织而言，充分的数据迁移准备和规划至关重要。
同时，在数据迁移过程中，是否可以在锁屏状态下进行迁移也是一个需要关注的问题。
本文将深入探讨数据迁移前的准备与规划，并解答关于数据迁移时是否可以锁屏的疑问。
二、数据迁移前的准备
1. 需求分析：在进行数据迁移前，首先需要明确迁移的目的和需求。明确迁移后的应用场景、数据量、数据类型等信息，有助于为后续的迁移工作提供指导。
2. 数据评估：对原始数据进行全面评估，包括数据的完整性、准确性、格式和关联性等方面。这有助于了解数据的现状，为制定迁移策略提供依据。
3. 技术选型：根据需求分析和数据评估结果，选择合适的数据迁移技术和工具。考虑技术的成熟度、稳定性、安全性以及与其他系统的兼容性等因素。
4. 资源准备：组建数据迁移团队，确保团队成员具备相关的技术能力和经验。同时，提前准备好所需的硬件设备、网络环境等资源。
5. 数据备份：在进行数据迁移前，务必对原始数据进行备份。备份的数据可用于恢复和校验，确保数据迁移过程的安全性。
三、数据迁移的规划
1. 制定迁移策略：根据需求分析和技术选型结果，制定详细的数据迁移策略。包括数据转换规则、传输方式、迁移时间等方面。
2. 制定迁移计划：根据迁移策略，制定详细的数据迁移计划。包括迁移的步骤、时间表、资源分配等。确保每个阶段的工作都有明确的安排和负责人。
3. 数据清洗与转换：在数据迁移过程中，可能需要对数据进行清洗和转换。清洗数据以消除错误、重复和无关的数据，转换数据以符合目标系统的格式和要求。
4. 测试与验证：在数据迁移后，进行测试和验证是必不可少的一环。确保数据的准确性、完整性和关联性，验证系统性能是否达到预期要求。
5. 风险管理与应对策略：在数据迁移过程中，可能会遇到各种风险和挑战。因此，需要提前识别潜在的风险，并制定相应的应对策略，确保数据迁移的顺利进行。
四、数据迁移时是否可以锁屏
在数据迁移过程中，是否可以锁屏取决于具体的迁移策略和使用的技术。
对于一些在线的数据迁移任务，如数据库实时同步等，在传输数据期间可能需要保持屏幕解锁状态，以确保数据传输的连续性。
对于一些批量处理或后台运行的数据迁移任务，可以在锁屏状态下进行。
一些现代化的数据迁移工具和技术支持断点续传、后台传输等功能，可以在锁屏状态下完成数据迁移。
五、结论
数据迁移前的准备与规划对于确保迁移的顺利进行至关重要。
在进行数据迁移时，需要根据具体的迁移需求和使用的技术来确定是否可以在锁屏状态下进行迁移。
通过合理规划和选择合适的技术，可以实现数据迁移的无缝衔接，并兼顾锁屏策略的需求。
数据迁移的数据抽取和转换的准备
数据抽取前，需要作大量的准备工作，具体归纳为如下4个部分。
(1)针对目标数据库中的每张数据表，根据映射关系中记录的转换加工描述，建立抽取函数。
该映射关系为前期数据差异分析的结果。
抽取函数的命名规则为：F_目标数据表名_E。
(2)根据抽取函数的SQL语句进行优化。
可以采用的优化方式为：调整SORTAREA_SIZE和HASH_AREA_SIZE等参数设置、启动并行查询、采用提示指定优化器、创建临时表、对源数据表作ANALYZES、增加索引。
(3)建立调度控制表，包括ETL函数定义表(记录抽取函数、转换函数、清洗函数和装载函数的名称和参数)、抽取调度表(记录待调度的抽取函数)、装载调度表(记录待调度的装载信息)、抽取日志表(记录各个抽取函数调度的起始时间和结束时间以及抽取的正确或错误信息)、装载日志表(记录各个装载过程调度的起始时间和结束时间以及装载过程执行的正确或错误信息)。
(4)建立调度控制程序，根据抽取调度表动态调度抽取函数，并将抽取的数据保存入平面文件。
平面文件的命名规则为：目标数据表。
数据转换的工作在ETL过程中主要体现为对源数据的清洗和代码数据的转换。
数据清洗主要用于清洗源数据中的垃圾数据，可以分为抽取前清洗、抽取中清洗和抽取后清洗。
ETL对源数据主要采用抽取前清洗。
对代码表的转换可以考虑在抽取前转换和在抽取过程中进行转换，具体如下。
(1)针对ETL涉及的源数据库中数据表，根据数据质量分析的结果，建立数据抽取前的清洗函数。
该清洗函数可由调度控制程序在数据抽取前进行统一调度，也可分散到各个抽取函数中调度。
清洗函数的命名规则为：F_源数据表名_T_C。
(2)针对ETL涉及的源数据库中数据表，根据代码数据差异分析的结果，如果需要转换的代码数据值长度无变化或变化不大，考虑对源数据表中引用的代码在抽取前进行转换。
抽取前转换需要建立代码转换函数，代码转换函数由调度控制程序在数据抽取前进行统一调度。
代码转换函数的命名规则为：F_源数据表名_T_DM。
(3)对新旧代码编码规则差异较大的代码，考虑在抽取过程中进行转换。
根据代码数据差异分析的结果，调整所有涉及该代码数据的抽取函数。
数据迁移的数据迁移的技术准备
数据转换与迁移通常包括多项工作：旧系统数据字典整理、旧系统数据质量分析、新系统数据字典整理、新旧系统数据差异分析、建立新旧系统数据之问的映射关系、开发部署数据转换与迁移程序、制定数据转换与迁移过程中的应急方案、实施旧系统数据到新系统的转换与迁移工作、检查转换与迁移后数据的完整性与正确性。
数据转换与迁移的过程大致可以分为抽取、转换、装载三个步骤。
数据抽取、转换是根据新旧系统数据库的映射关系进行的，而数据差异分析是建立映射关系的前提，这其中还包括对代码数据的差异分析。
转换步骤一般还要包含数据清洗的过程，数据清洗主要是针对源数据库中，对出现二义性、重复、不完整、违反业务或逻辑规则等问题的数据进行相应的清洗操作；在清洗之前需要进行数据质量分析，以找出存在问题的数据，否则数据清洗将无从谈起。
数据装载是通过装载工具或自行编写的SQL程序将抽取、转换后的结果数据加载到目标数据库中。
对数据的检查包括以下6个方面。
(1)数据格式检查。
检查数据的格式是否一致和可用，目标数据要求为number型。
(2)数据长度检查。
检查数据的有效长度，对于char类型的字段转换到varchar类型中，需要特别关注。
(3)区间范围检查。
检查数据是否包含在定义的最大值和最小值的区间中。
例如年龄为300或录入日期为4000—1—1显然有问题。
(4)空值、默认值检查。
检查新旧系统定义的空值、默认值是否相同，不同数据库系统对空值的定义可能不同，需要特别关注。
(5)完整性检查。
检查数据的关联完整性。
如记录引用的代码值是否存在，特别需要注意的是有些系统在使用一段时间后，为了提高效率而去掉了外键约束。
(6)一致性检查。
检查逻辑上是否存在违反一致性的数据，特别是存在分别提交操作的系统。
ERP升级如何做好数据迁移
有句话这样形容信息化系统的几个重要因素，“三分技术、七分管理、十二分数据”，从中我们也不难看出，数据对一个企业的信息化工作具有多么重要的地位。
实际上，信息系统内部以及信息系统间相互流动的信息都是依托企业的数据信息产生的，如果企业没有很好的将数据整理、分类、应用，可以说，这个信息系统差不多是不成功的。
就像早些时候很多企业大干特干“数据集中”一样，他们其实都是在对数据进行保护、规范、控制，目的当然也很简单，就是为企业的信息化提供数据支持。
数据迁移往往是ERP更替最后，也是最重要的环节由于各种原因，越来越多的企业面临着ERP系统替换问题，而在系统更换前，现有ERP系统中有效数据的倒入，对ERP系统切换以及新系统正常运行有着重要影响。
数据迁移稍有不慎，便会造成新系统不能正常启动，而迁移过多垃圾数据，将有可能使新ERP系统运行缓慢、甚至瘫痪。
因此，在进行新旧ERP系统替换过程中，企业CIO们除了要对新ERP系统进行项目需求、规划、实施，解决用户应用习惯以及开发相关接口外，还要认真考虑历史数据的导入问题。
尤其是在现有ERP系统运行数年，积累了上百GB数据的情形下，CIO们更需要仔细衡量历史数据的有效性和对新系统的影响以及数据迁移的方式和方法。
而这决不仅仅是异构数据库、不同存储设备之间数据迁移那么简单，它更像是对以前ERP数据以及ERP业务流程的重新审视和考核。
解决好ERP替换过程中的数据迁移问题不仅是新ERP系统成功上线的重要前提和保障，同时也是对已有ERP系统的一次全面总结和反思。
数据迁移切忌完整对于传统数据迁移或数据库更替问题，企业CIO或数据库开发维护人员考虑得更多的是数据迁移的完整性和可靠性，但是对于ERP替换过程中的数据迁移而言，保持数据的完整性却是大忌。
因为新旧ERP系统替换过程中，历史数据的迁移绝对不是孤立存在的。
它虽然看似一个简单的数据库更替问题，但是，它涉及到从一个ERP系统到另一个ERP系统，从一个应用模式转向另一个应用模式的转变，这更多的是ERP本身的问题。
业内人士指出，对于同一厂商不同ERP产品替换，由于系统是在同一数据库基础上开发，而且存储逻辑或方法基本相同，所以旧系统中的数据利用率会很高，可以达到70%；而对于不同厂商的ERP产品替换，其旧数据利用率不超过10%，而且旧系统中数据利用得越多，新系统的负担就越大、性能越差、信息越不准确，这与简单的数据库迁移强调完整性有着本质区别。
而且，虽然用户选择的ERP厂商所提供ERP产品的模块可能相同，但是在相应实现方法、数据库记录的表结构以及ERP工作流程方面却是大相径庭，因此，ERP替换过程中的数据迁移不仅仅是数据的导入、导出问题，更是系统的更换、工作方式的改变。
所以，在进行ERP数据迁移时，企业CIO们不应简简单单地把ERP数据迁移看作是单一的数据库问题。
企业CIO们首先应根据新ERP系统的需求设立项目目标，针对新的模块确定所要迁移的有效数据，其次才是ERP数据迁移过程中的技术实现问题。
神州数码管理系统有限公司易飞服务部经理梁景茹建议，用户最好能请曾长期应用旧系统的人员参与到数据迁移小组中，以了解新旧系统的数据库和有关字段，避免数据字段对应错误。
