保险行业 · 变更数据捕获
通过 CDC 实现近实时数据摄取
建立旧系统的全量与增量数据流，并配套数据质量修复、测试、监控及生产支持。
已交付项目Oracle 与 DB400源系统
全量与增量加载模式
近实时下游更新
挑战
某保险机构需要从现有 Oracle 与 DB400 系统近实时摄取数据，同时保持初始加载可控、增量处理可靠。
由于历史数据存在质量问题、源记录不一致，且需要协调系统集成测试（SIT）和用户验收测试（UAT），仅配置数据复制功能并不足够。
Monic 的交付内容
Monic 设计了全量及增量加载的数据流程，安装并配置 Informatica PowerExchange 以捕获数据变更，同时建立了识别和修正历史数据问题的方法。
团队与业务及技术相关方协调测试，解决源数据差异，监控生产 CDC 流程，并支持性能与错误处理改进。
交付结果
项目建立了近实时保险数据摄取所需的 CDC 流程及生产支持实践，覆盖初始加载与持续增量变更处理。
案例启示
成果背后的工程经验。
面对类似运营问题时，团队可以参考这些做法来规划项目。
CDC 也需要初始加载策略
从受控全量加载切换到增量捕获时，必须保持完整性，并明确缺口、重复、顺序及重启的处理方式。
旧数据质量影响实时数据流
更快的数据摄取不会纠正不一致的源记录。检测、修复及业务审核仍须纳入方案。
完整的方案也要包含生产监控
延迟、错误、捕获停止、源端变化及核对异常都需要可观测信号，以及能及时响应的支持负责人。