ERP 数据迁移：最佳实践和常见陷阱

数据迁移是 ERP 实施成功或失败的最根本的层面。你可以设计一个完美的系统架构，完美地配置软件，并全面地培训用户——然后由于提供的数据是错误的而导致实施崩溃。

“数据迁移”这个词听起来很技术性和操作性。实际上，这是一项全组织范围的活动，旨在应对多年运营中积累的数据质量债务。重复的客户记录、不一致的产品代码、不一致的库存盘点、缺失的供应商信息以及无法清晰映射到现代 ERP 数据模型的遗留数据结构——这些问题并不会因为安装了新系统而消失。它们会迁移，并在新系统中引起问题，有时修复这些问题比旧​​系统中的成本更高。

本指南涵盖了完整的数据迁移生命周期，为每个阶段提供了具体的、可操作的指导，并对大多数 ERP 迁移遇到的陷阱进行了诚实的描述。

要点

• 数据迁移通常是 ERP 实施中最被低估的阶段（预算是初始估计的 3-5 倍）
• 在实施开始前六到十二周开始数据质量评估
• 永远不要迁移坏数据 - 首先清理它，然后迁移干净的数据
• “只迁移所有内容并稍后清理”方法确实失败了
• 在迁移前建立数据所有权：谁对每个数据实体的质量负责？
• 在迁移之前而不是期间构建验证规则
• 在切换迁移之前计划进行两到三次迁移测试运行
• 历史数据和期初余额是不同的问题，有不同的解决方案

---

ERP 迁移中的四种数据类型

ERP 迁移中的所有数据并非都是一样的。了解这四种类型及其独特的迁移挑战是规划成功迁移的第一步。

类型 1：主数据

主数据是每笔交易的基础：客户记录、供应商记录、产品（项目）、会计科目表、员工和仓库/位置层次结构。主数据质量直接决定交易数据质量——如果客户记录重复，则与该客户相关的每笔交易都会加剧重复问题。

主数据迁移通常是劳动力最密集的阶段，因为它需要针对遇到的每个数据质量问题做出业务决策。是否应该合并重复的客户记录？如果有的话，哪一个记录才是权威的？计量单位不一致的产品该如何标准化？

类型 2：期初余额

期初余额代表企业上线时的财务状况：应收账款（谁欠你钱）、应付账款（你欠谁钱）、库存价值（你持有什么库存以及成本）以及总账账户余额。期初余额必须精确到美分——应收账款中 0.01 美元的差异将导致数月的对账问题。

期初余额根据旧系统的结账状态进行验证，并且必须在上线之前进行精确调节。这种验证通常会揭示遗留系统和实际业务状态之间的差异（记录但从未发送的发票、消耗但未记录的库存、收到但未应用的付款）。

类型 3：交易历史

交易历史记录是已发生事件的记录：采购订单、销售发票、库存变动、人力资源记录等。与期初余额不同，交易历史记录不需要完全准确才能进行操作 - 它需要足够准确以用于报告、审计和参考目的。

对于大多数实施来说，最近两到三年的交易历史就足够了。较旧的历史记录通常可以存档在遗留系统中以供参考，而不是迁移到新的 ERP。

类型 4：配置数据

配置数据不是业务数据，而是使系统正确运行的设置：付款条件、税率、定价规则、工作流配置、用户角色等。虽然这在技术上是“迁移”的一部分，但更准确地描述为配置复制 — 在新 ERP 的配置模型中重新创建遗留系统的业务规则。

---

第一阶段：数据发现和评估

数据发现阶段应在实施开始前六到十二周开始，而不是在实施已经开始之后。在实施期间而不是实施之前发现严重的数据质量问题是 ERP 时间超支的最常见原因。

数据清单：

对遗留系统中存在的每个数据实体进行编目：

• 存在哪些实体（客户、供应商、产品、员工等）
• 每个实体居住的地方（哪个或哪些系统）
• 每个实体存在多少条记录
• 数据的格式（关系数据库、平面文件、电子表格）
• 谁是企业主对每个实体的质量负责

数据质量评估：

对于每个主要实体，进行定量质量评估，涵盖：

• 完整性（填充所有必填字段的记录百分比是多少？）
• 唯一性（重复或接近重复的记录百分比是多少？）
• 一致性（相同的值在记录和系统中是否一致表示？）
• 准确性（根据实际情况抽查记录样本 - 实际库存、实际供应商发票、实际客户信件）

中端市场 ERP 迁移中的典型质量发现：

• 8–20% 的客户记录是重复或接近重复的
• 15–35% 的产品记录缺少或不一致的计量单位数据
• 10–25% 的库存记录的余额与最近的实际盘点不符
• 多年未使用且应停用的旧总账科目
• 命名约定不一致、字段缺失或角色信息过时的员工记录

迁移风险评估：

根据数据质量评估，按迁移风险对各个数据实体进行分类：

• 低风险：干净的数据、清晰地映射到新的 ERP 结构、标准格式
• 中等风险：一些质量问题，需要清洁但可控
• 高风险：重大质量问题、结构不明确或复杂的映射要求

高风险实体需要延长时间、专门的企业主参与以及潜在的专门数据清理工具或脚本。

---

第二阶段：数据清理

数据清理是数据迁移的真正工作和真正价值发生的地方。目标是使每个数据实体达到适合迁移到新 ERP 的质量水平。

永远不要迁移坏数据。现在迁移数据并稍后清理数据的诱惑很强烈，尤其是当清理时间比计划的时间长时。抵制它。新 ERP 中的坏数据比旧系统中的坏数据更糟糕，因为：

• 新 ERP 的验证规则将标记旧系统忽略的错误，从而立即产生运营问题
• 新ERP中遇到数据质量问题的用户归咎于新系统，而不是底层的数据质量问题
• 迁移后清理数据需要了解新ERP的数据模型，这比清理熟悉的遗留结构中的数据更困难

数据清洗过程：

对于每个高风险和中风险实体，应用结构化的清理流程：

1. 将数据从遗留系统提取到临时环境
2. 运行自动验证规则来识别所有质量问题
3. 按数量和影响对问题进行优先级排序（100 条重复的客户记录 > 5 条缺失的供应商邮政编码） 4.解决企业主输入的问题（当两个客户记录冲突时，权威记录是什么？）
4. 记录审计跟踪的决策和决议
5. 重新运行验证规则以确认所有问题均已解决
6. 在迁移之前让企业主批准清理后的数据

数据清理工具：

ECOSIRE 使用自定义 Python 脚本进行自动验证和转换，并结合 Excel 或 Google Sheets 进行企业主审查和批准个人记录决策。对于非常大的数据集，专用 ETL 工具（Pentaho、Talend 或云原生等效工具）可提供更好的性能和审核日志记录。

---

第 3 阶段：数据映射和转换

数据映射定义了旧系统结构中的数据如何映射到新 ERP 的数据结构。这是一项技术练习，需要大量的业务输入。

结构映射挑战：

遗留系统的数据结构通常无法清晰地映射到现代 ERP 结构。常见挑战：

• 科目表重组：旧的科目表可能有数百个科目，需要在新的 ERP 中合并为更清晰的结构。每个合并决策都需要财务团队的意见。
• 产品层次结构更改：旧产品目录通常具有临时层次结构，需要将其重组为 ERP 的类别/子类别模型。每个产品都需要映射到它的新类别。
• 多币种重新配置：如果自实施遗留系统以来业务已发展到以多种币种运营，则新 ERP 中的币种配置需要反映当前状态，而不是历史状态。

转换规则：

除了结构映射之外，数据通常还需要进行转换才能满足新系统的格式要求。转换规则应在迁移运行之前记录下来并由企业主审查。常见的变换：

• 名称标准化（所有客户均采用名字格式，所有供应商均采用注册合法名称）
• 电话号码格式标准化（所有号码均采用 E.164 国际格式）
• 地址验证和标准化（邮政编码验证、国家/地区代码标准化）
• 计量单位转换（传统单位的历史记录转换为ERP标准单位）
• 状态代码映射（旧系统状态代码映射到 ERP 状态值）

数据映射文档：

生成正式的数据映射文档，该文档显示旧系统中的每个字段、新 ERP 中的相应字段、应用的任何转换以及管理映射的业务规则。本文件对于以下方面至关重要：

• 根据预期行为验证迁移脚本
• 解决测试过程中发现的差异
• 支持上线后审核查询

---

第 4 阶段：迁移开发和测试

完成清理并记录映射后，可以开发和测试迁移脚本。

迁移脚本开发：

迁移脚本从临时环境中提取清理后的数据，根据映射文档应用转换，并将转换后的数据加载到新的 ERP 中。 ECOSIRE 使用 Python 开发迁移脚本，使用 Odoo XML-RPC API 进行加载。这些脚本包括：

• 迁移前验证（确认暂存环境中的数据与批准的清理数据集匹配）
• 带有错误日志记录的批处理（记录任何加载失败的记录以供人工审核）
• 迁移后验证（确认加载的数据与预期计数和值匹配）
• 回滚功能（如果迁移运行产生意外结果，则能够将 ERP 重置为其迁移前状态）

测试迁移运行：

在切换迁移之前计划运行两到三次测试迁移：

• 测试运行 1（第 X 周）：验证迁移脚本的基本功能并识别任何转换错误
• 测试运行 2（第 X+2 周）：针对更完整、更清晰的数据集进行验证；生成第一份完整的验证报告
• 测试运行 3/彩排（第 X+4 周）：针对最终清理的数据集进行完整的端到端迁移，定时，并按照上线当天的方式执行切换过程

每次测试运行都应生成一份验证报告，将迁移的数据与预期计数、值和引用完整性约束进行比较。必须在下一次测试运行之前解决差异。

---

第五阶段：期初余额调节

期初余额调节与主数据和交易历史记录迁移是分开的，因为它需要时间点财务准确性而不仅仅是数据完整性。

对账过程：

在商定的切换日期，从旧系统中提取每个财务实体的期末余额：应收账款账龄、应付账款账龄、按地点划分的库存价值、总账科目余额。这些成为新 ERP 中的期初余额。

将提取的余额与以下各项进行核对：

• 最新的银行对账单（现金账户）
• 与AR工作人员确认的最新应收账款账龄报告
• 经 AP 工作人员确认的最新应付账款账龄报告
• 自盘点日期以来根据变动调整的最新实物库存盘点

提取的余额与真实情况之间的任何差异都必须在上线之前解决。将差异带入新系统将导致数月的对账问题。

“永远开放”的发票问题：

在大多数遗留会计系统中，存在许多在技术上是开放的（未全额支付）但在功能上已经失效的发票——有争议的、无法收回的或行政上废弃的。这些“永远开放”的发票不应作为开放 AR 进行迁移。在迁移之前应将它们注销或标记为无法收集。财务团队需要对每一项做出明确的决策。

---

第 6 阶段：切换规划和执行

切换是旧系统停止、新 ERP 启动的时刻。精确规划切换顺序可以防止上线当天出现混乱。

割接计划：

使用以下内容记录切换过程的每个步骤：

• 谁执行该步骤
• 该步骤的预计持续时间
• 依赖关系（此步骤开始之前必须完成的内容）
• 验证检查（如何确认步骤完整且正确）
• 回滚操作（如果此步骤失败该怎么办）

对于 100 人的公司来说，一次典型的切换需要 8 至 16 小时。切换通常安排在周末，以尽量减少业务中断。

切换顺序：

1. 旧系统冻结：不允许新交易
2. 从遗留系统中提取最终数据
3. 最终数据验证和清理（自上次测试运行以来发现的任何问题） 4、主数据迁移脚本执行
4. 期初余额迁移和验证
5. 交易历史迁移（如果迁移最近的历史记录）
6. 完整的验证报告审核并由财务部门签字 8.系统配置验证（所有设置正确） 9、新ERP上线运营

---

常见陷阱以及如何避免它们

陷阱 1：迁移所有内容

迁移所有历史数据的冲动是可以理解的，但往往会适得其反。遗留系统十年的交易历史记录需要数周的时间来迁移、验证和加载——而且其中大部分永远不会被查询。定义迁移期限（通常为两到三年）并将较旧的历史记录存档在遗留系统中，而不是迁移它。

陷阱 2：假设遗留系统数据是事实来源

遗留系统数据经常是错误的。如果您将其视为权威，则会将错误迁移到新系统中。与遗留系统报告相比，实物盘点、银行对账单和供应商对账单是期初余额更好的真实来源。

陷阱3：没有测试环境

未经沙箱环境测试而直接迁移到生产是高风险的。始终维护一个反映迁移测试阶段生产的测试环境。

陷阱4：企业主参与不足

数据清理和映射决策需要技术团队不具备的业务判断力。业务所有者参与不足会导致技术团队做出错误的业务决策，从而产生数据质量问题，并在上​​线后表现为运营问题。

陷阱5：没有回滚计划

每次上线都应该有一个明确的回滚计划：如果新系统在前 24-48 小时内无法正常工作，恢复到旧系统的流程是什么？准备好这个计划可以减少在危机中仓促做出决定的压力。

---

常见问题

我们应该在 ERP 实施中规划多长时间的数据迁移？

对于中端市场公司（100-300 名员工、2-5 个数据源系统），计划六到十周的数据迁移作为专用阶段，在配置完成足以建立目标数据结构后开始。此外，在实施开始前分配四到六周的时间进行数据质量评估和初步清理。从首次评估到切换，数据迁移总投资通常需要十到十六周。

我们应该在实施之前还是实施期间清理数据？

以前，总是。与实施并行进行的数据清理使用实施团队进行配置验证和测试所需的相同业务所有者资源。它还会延迟迁移时间，因为清理取决于需要时间收集的业务决策。在实施开始前六到十二周开始数据清理是最有效的方法。

ECOSIRE 可以从任何旧版 ERP 迁移数据吗？

ECOSIRE 已为 SAP Business One、QuickBooks（桌面版和在线版）、Sage 50 和 Sage 100、Microsoft Dynamics（GP、NAV、BC）以及多个行业特定平台构建了迁移工具。对于其他系统，迁移方法是根据可用的导出格式（SQL 数据库、XML、CSV 导出或 API 访问）设计的。尽管迁移工作因源系统而异，但尚未遇到无法迁移的遗留系统。

ERP 实施中数据迁移的典型成本是多少？

对于 ECOSIRE 实施，数据迁移通常占总实施成本的 15-25%。对于 150,000 美元的实施，数据迁移成本为 22,000 美元至 37,000 美元。该范围主要取决于数据质量（较低的质量=更多的清理成本）和数量（更多的记录=更多的脚本开发和验证时间）。迁移开始后发现的数据质量问题可能会显着增加此成本，这就是实施前评估投资如此有价值的原因。

---

后续步骤

如果您正在规划 ERP 实施，并希望在做出时间表和预算承诺之前帮助评估您的数据质量，ECOSIRE 可以提供数据准备情况评估，该评估可以评估您的关键数据实体、识别质量问题并为迁移阶段提供切合实际的估计。

了解有关 ECOSIRE 的 Odoo 迁移实践的更多信息，请访问 /services/odoo/migration。