技术开发 频道

丁原:淘宝海量数据快速迁移方法分享

  【IT168 资讯】4月15日,国内数据库领域唯一的年度盛会,由盛拓传媒IT168网站汇集旗下ITPUB、IXPUB以及ChinaUnix中国三大企业级技术社区优势资源主办的2011数据库技术大会在北京举行。在上午的数据库高可用架构设计专场中,Taobao DBA丁原向我们介绍了淘宝海量数据快速迁移实践:Oracle-Oracle,Oracle-MySQL,MySQL-Oracle,并介绍了海量数据下全量迁移、增量迁移和跨平台的迁移。


▲Taobao DBA丁原

  丁原谈到,海量数据下全量迁移更倾向于extent切分+手动并行,增量主要采用gmt_modified字段来判断,跨平台迁移主要通过perl/tddl/sqluldr/dbsync来处理。

  全量、增量迁移常用方案可选方案很多,灵活使用,选择最简单、高效、可靠性。


▲全量迁移


▲增量迁移

0
相关文章