资讯专栏INFORMATION COLUMN

UCloud数据迁移方案UDTS:在线业务数据,一键平滑迁移

Tecode / 2493人阅读

摘要:自上线以来,总迁移已超过级数据量。支持通过内网专线以及外网迁移数据。全量迁移在全球多地地域部署服务,根据源目位置来就近选择运行位置,保证迁移效率。

数据库是公司核心资产的重要存储基座,面对用户不同场景,数据也需跨数据库迁移。如用户业务上云、多云灾备下的数据同步、不同数据源的聚合分析等,都需数据跨数据库的迁移。

UCloud数据迁移方案UDTS

UCloud数据传输服务UDTS(UCloud Data Transmission Service),拥有完善的数据迁移组件,方便用户灵活调整数据架构、实时同步数据并分析,帮助用户降低数据迁移风险,实现数据安全、稳定迁移; UDTS支持多种同构和异构数据源之间的全量或增量、多库或全库迁移,支持ETL数据过滤等。自上线以来,UDTS总迁移已超过PB级数据量。

传统数据迁移痛点

1、迁移前需暂停线上业务,对用户业务造成影响;
2、迁移数据量到一定级别,容易受限网络带宽、磁盘大小、CPU资源等环境问题;
3、开源数据迁移工具不完善,需各种参数配置,操作复杂,易出错,对执行人员要求高。

UDTS方案优势

一、快速迁移,全球覆盖

UDTS数据迁移快速、高效,最高速率达到1Gbps,确保用户业务快速迁移;UDTS数据迁移应用已覆盖UCloud全球重点数据节点,可实现全球跨域数据传输。

二、保障用户业务连续性

UDTS具有限速功能,用户在迁移过程中,结合生产业务情况,对迁移数据速度随需调整,避免数据迁移影响用户现有业务的正常运营,保障业务连续性。

三、支持多类型数据库迁移

UDTS支持的数据类型丰富,涵盖了MySQL、TiDB、MongDB、Redis、PgSQL等多类型的数据库迁移;同时,在迁移类型上,可完成数据按表、按库,及全库等多类型迁移。

image.png

四、支持丰富的迁移模式

UDTS迁移模式丰富,支持数据库的全量迁移、单向增量同步、双向增量同步。支持通过内网、专线以及外网迁移数据。

1.全量迁移

UDTS在全球多地地域部署服务,根据源目位置来就近选择运行位置,保证迁移效率。
image.png

2.单向增量同步

UDTS模拟一个Slave节点,通过Binlog从全量导出点开始获取增量数据。

image.png

3.双向增量同步

与单向增量同步类似,模拟Replication来获取增量数据。同时UDTS对写下去的数据做标记,当有新的Binlog Event,自主检查标记情况:如有标记则说明是循环数据,直接丢弃,如没有标记则加上标记写到对端。

image.png

五、预先检查,一键启动

迁移中,用户无需准备物理资源,一键启动即可在线迁移;此外依据用户业务需求,UDTS还提供迁移预检查,以及数据迁移专家的实时服务支持。
image.png

UDTS应用场景

企业上云

企业将现有业务从本地数据中心迁移上云,实现云服务为持续增长业务带来的弹性“福利”,如当前数字化转型的线下连锁店、制造、金融等相关用户。

图片-传统企业上云

数据灾备

用户业务发展到一定体量,为保证自身业务的持续安全运行,希望通过异地双活/多活、多云部署等多种模式,实现数据灾备,保障用户现有业务的稳定。

多源聚合

大数据时代,基于大数据分析,为企业提供科学、便捷的数字化可视化管理,成为未来方向;UDTS支持用户多个数据源跨数据库汇聚、集合,并结合BI分析,为企业的数据可视化呈现提供便利。

文章版权归作者所有,未经允许请勿转载,若此文章存在违规行为,您可以联系管理员删除。

转载请注明本文地址:https://www.ucloud.cn/yun/126082.html

相关文章

  • 悦跑圈跨云迁移实践(X云→UCloud):1亿跑迷“云上跑”,悦跑圈开辟数字江湖

    摘要:年月悦跑圈创立,首个具有防作弊功能的跑步悦跑圈应运而生。目前,上百余场线上马拉松赛事在悦跑圈平台顺利举办,跑团保有数量高达,覆盖全球个城市。目前,悦跑圈主营业务全量部署在云平台。完成一次全程马拉松,是不少跑步爱好者的追求。然而参与马拉松赛事却存在诸多门槛:特定的时间和地点、人数要求。受疫情冲击,此类线下赛事更是受限。数字时代下,一切都有了全新想象。2014年2月悦跑圈创立,首个具有防作弊功能...

    Tecode 评论0 收藏0
  • 打通本地部署和公有云,混合云架构让“鱼”和“熊掌”兼得(一)

    摘要:对于上述问题,混合云架构无疑是企业的最佳选择。解决方案将本地环境与公有云连通组成混合云架构,实现对本地环境计算能力的快速扩展。前言当前各行各业在积极拥抱云计算,但由于一些历史原因和合规要求导致很多企业全面上云比较困难,比如企业监管制度及合规要求一些核心数据库必须保留在本地数据中心;本地数据中心作为企业固定资产不容易完全抛弃;有些大型集团企业IT架构复杂,全面迁移上云的影响难以评估等等。因此,...

    Tecode 评论0 收藏0
  • 打通本地部署和公有云,混合云架构让“鱼”和“熊掌”兼得(一)

    摘要:对于上述问题,混合云架构无疑是企业的最佳选择。解决方案将本地环境与公有云连通组成混合云架构,实现对本地环境计算能力的快速扩展。前言当前各行各业在积极拥抱云计算,但由于一些历史原因和合规要求导致很多企业全面上云比较困难,比如企业监管制度及合规要求一些核心数据库必须保留在本地数据中心;本地数据中心作为企业固定资产不容易完全抛弃;有些大型集团企业IT架构复杂,全面迁移上云的影响难以评估等等。因此,...

    Tecode 评论0 收藏0
  • 跨云迁移过程中的数据同步及一致性校验实践(一)

    摘要:通过对一些客户的跨云迁移过程进行总结,发现普遍存在的挑战有三点数据完整性和一致性挑战。简而言之,跨云迁移过程中的数据一致性主要就集中在存量数据的迁移如何保证一致。前言随着互联网业务发展对容灾以及对访问加速、多供应商成本控制等需求的产生,互联网公司的多云部署和跨云迁移逐渐成为刚需,而在此过程中,最困扰运维和研发人员的就是数据的迁移和同步。俗语说 上屋搬下屋,搬洒一箩谷 ,在业务的迁移过程中一旦...

    Tecode 评论0 收藏0

发表评论

0条评论

最新活动
阅读需要支付1元查看
<