Squids DBMotion 数据库迁移服务上线|助力云端数据畅游无阻!

本贴最后更新于 803 天前,其中的信息可能已经水流花落

db1.png

image.png

前百度产品副总裁俞军老师的一个著名产品价值公式——产品价值=(新体验-旧体验)- 换用成本。这一公式,此前被俞军老师用来解释过很多新产品的崛起。

具体来说,任何一种新产品要推广到市场,首先面临的就是怎么让用户从替代产品上迁移上来,要么你的新产品相对旧产品的价值增幅非常大,要么让用户很方便的从旧产品替换为新产品。

打个比方,虽然新沙发的各种按摩、腿托、躺平的功能让你心动不已,家里的沙发也早就老旧破损,不堪重负了,但是你一想到要搬下楼还要找人把它处理掉的各种麻烦事,总会打起退堂鼓。如果新沙发的厂商能提供置换服务,替你安装好新沙发,还能把旧沙发处理掉,降低你的换用成本,那你更换的可能性就会高很多了。

同理,若你在某云厂商 ECS 上部署了 MySQL,性能比较差,一天到晚出问题,同时你体验了 Squids RDS 的各种好处,但是想到迁移过去还得找个时间通知客户说需要暂停服务,担心一不小心还背个黑锅,于是多一事不如少一事,回头再说吧。

现在你不用等了,DBmotion 可以帮你把 MySQL 数据库迁移并持续同步到 Squids 的 RDS 上,实现零停机的业务迁移。

db3.png

Squids DBMotion,一个丝滑、免费、零停机、高性能、降低“换用成本”的数据库迁移服务。

db4.png

**|**简单易用

  • 可视化,输入源端和目标端,点击鼠标就能实现迁移
  • 实时查看迁移数据量和进度状态信息
  • 迁移报错信息清晰明了

| 并发高性能

  • 全量、增量、校验过程都使用多线程并发
  • 全量导入使用 insert batch,提升小表(每行数据不大于 1kB)导入性能

| 零停机

  • 增量实时同步保证目标端和源端数据秒级数据一致性
  • pt-table-checksum 模式动态校验数据,保证不停机校验数据一致性

| 极致安全

  • 随时进行动态校验,确认源库和目标库的数据一致性
  • 端到端加密,支持 SSL 连接
  • WITH CONSISTENT SNAPSHOT 事务引擎数据拷贝,尽量降低对源库锁的粒度

db5.png

DBMotion 目前支持以下主要场景的数据库迁移,包括:

  • ECS 云主机上的 MySQL 迁移上 Squids
  • 线下自建 MySQL 迁移上 Squids
  • Squids 上 MySQL 实例的多云迁移,及各种云上 MySQL 实例间的迁移

ECS 上 MySQL 迁移上 Squids

这里假设客户的 ECS 上运行的 MySQL 实例为 1.2.3.4:13306,Squids 上申请了一个名为 my-6faw85iM 的 MySQL 数据库实例,想要将 ECS 上的业务迁移到 squids 上来,需要执行以下操作。

一、在“数据传输”页面选择"+ 添加迁移任务"

db6.png

添加迁移任务包括三个步骤:源库目标库配置、迁移选项配置、配置确认

1.源库目标库配置阶段 如果源端或者目标端支持 SSL,可以使用 SSL 进行加密传输

db7.png

2.迁移选项配置阶段,选择需要迁移的数据库和迁移类型。

db8.png3.配置确认阶段 这个阶段会进行预检查,检查连通性和授权等情况。

db9.png

二、查看任务详情 这个阶段可以查看任务在各个阶段执行的具体情况,并且支持动态校验源端和目标端的数据是否一致

db10.png

线下自建 MySQL 迁移上 Squids

线下自建 MySQL 迁移上 Squids 相对云上 ECS 迁移最主要的区别在于,线下的自建 MySQL 没有公有 IP,需要利用 dbmotion_tool 来将线下数据库映射到公网上来。

你需要找到一台能通公网并且能访问内网数据库的服务器,利用它来将内网 MySQL 映射到公网上,在这台中转服务器上执行 dbmotion_tool 命令来完成映射功能

 ./dbmotion_tool -t create -h 192.168.2.104 -p 13306    create tunnel for 192.168.2.104:13306 on 48834    tunnel for 192.168.2.104:13306 on 48834 is created.

这里搭建了内网数据库的 192.168.2.104:13306 反向隧道,映射到

dbmotion.squids.cn:48834 上

跨云迁移

客户在阿里云上的 Squids 实例如果想迁移到华为云上,类似于 ECS 迁移上 Squids 实例的操作,也可以实现零停机将数据库迁移走,实现对云及云上的数据库资源无依赖,完成多云 cloudLess 自由切换。

开始试用吧

访问

https://squids.cn/product/dbmotion

就可以获得数据库迁移服务

访问

https://github.com/squids-io/dts-doc

获取最新的使用文档

访问

https://github.com/squids-io/dts-doc/blob/master/dbmotion_tool

下载 dbmoiton_tool 免费使用

后续 mongodb 的迁移支持正在紧张研发中,预计 5 月底发布,基于 kafka 的实时数据订阅功能也将陆续上线,敬请期待!

有任何问题可以直接在 squids 的在线帮助聊天窗口或者 github.com 上的 issue 功能 获得及时的帮助!

丝滑 DBMotion 祝您在云上畅游无阻

相关帖子

欢迎来到这里!

我们正在构建一个小众社区,大家在这里相互信任,以平等 • 自由 • 奔放的价值观进行分享交流。最终,希望大家能够找到与自己志同道合的伙伴,共同成长。

注册 关于
请输入回帖内容 ...
squids
everything can be containered!!! 杭州

推荐标签 标签

  • BAE

    百度应用引擎(Baidu App Engine)提供了 PHP、Java、Python 的执行环境,以及云存储、消息服务、云数据库等全面的云服务。它可以让开发者实现自动地部署和管理应用,并且提供动态扩容和负载均衡的运行环境,让开发者不用考虑高成本的运维工作,只需专注于业务逻辑,大大降低了开发者学习和迁移的成本。

    19 引用 • 75 回帖 • 616 关注
  • frp

    frp 是一个可用于内网穿透的高性能的反向代理应用,支持 TCP、UDP、 HTTP 和 HTTPS 协议。

    16 引用 • 7 回帖 • 2 关注
  • 服务器

    服务器,也称伺服器,是提供计算服务的设备。由于服务器需要响应服务请求,并进行处理,因此一般来说服务器应具备承担服务并且保障服务的能力。

    124 引用 • 580 回帖
  • Flume

    Flume 是一套分布式的、可靠的,可用于有效地收集、聚合和搬运大量日志数据的服务架构。

    9 引用 • 6 回帖 • 613 关注
  • Kotlin

    Kotlin 是一种在 Java 虚拟机上运行的静态类型编程语言,由 JetBrains 设计开发并开源。Kotlin 可以编译成 Java 字节码,也可以编译成 JavaScript,方便在没有 JVM 的设备上运行。在 Google I/O 2017 中,Google 宣布 Kotlin 成为 Android 官方开发语言。

    19 引用 • 33 回帖 • 51 关注
  • 程序员

    程序员是从事程序开发、程序维护的专业人员。

    544 引用 • 3531 回帖
  • 区块链

    区块链是分布式数据存储、点对点传输、共识机制、加密算法等计算机技术的新型应用模式。所谓共识机制是区块链系统中实现不同节点之间建立信任、获取权益的数学算法 。

    91 引用 • 751 回帖
  • SQLServer

    SQL Server 是由 [微软] 开发和推广的关系数据库管理系统(DBMS),它最初是由 微软、Sybase 和 Ashton-Tate 三家公司共同开发的,并于 1988 年推出了第一个 OS/2 版本。

    19 引用 • 31 回帖 • 2 关注
  • 面试

    面试造航母,上班拧螺丝。多面试,少加班。

    324 引用 • 1395 回帖 • 1 关注
  • Swagger

    Swagger 是一款非常流行的 API 开发工具,它遵循 OpenAPI Specification(这是一种通用的、和编程语言无关的 API 描述规范)。Swagger 贯穿整个 API 生命周期,如 API 的设计、编写文档、测试和部署。

    26 引用 • 35 回帖
  • Ruby

    Ruby 是一种开源的面向对象程序设计的服务器端脚本语言,在 20 世纪 90 年代中期由日本的松本行弘(まつもとゆきひろ/Yukihiro Matsumoto)设计并开发。在 Ruby 社区,松本也被称为马茨(Matz)。

    7 引用 • 31 回帖 • 196 关注
  • NGINX

    NGINX 是一个高性能的 HTTP 和反向代理服务器,也是一个 IMAP/POP3/SMTP 代理服务器。 NGINX 是由 Igor Sysoev 为俄罗斯访问量第二的 Rambler.ru 站点开发的,第一个公开版本 0.1.0 发布于 2004 年 10 月 4 日。

    311 引用 • 546 回帖
  • 快应用

    快应用 是基于手机硬件平台的新型应用形态;标准是由主流手机厂商组成的快应用联盟联合制定;快应用标准的诞生将在研发接口、能力接入、开发者服务等层面建设标准平台;以平台化的生态模式对个人开发者和企业开发者全品类开放。

    15 引用 • 127 回帖 • 1 关注
  • 分享

    有什么新发现就分享给大家吧!

    245 引用 • 1776 回帖 • 1 关注
  • Ubuntu

    Ubuntu(友帮拓、优般图、乌班图)是一个以桌面应用为主的 Linux 操作系统,其名称来自非洲南部祖鲁语或豪萨语的“ubuntu”一词,意思是“人性”、“我的存在是因为大家的存在”,是非洲传统的一种价值观,类似华人社会的“仁爱”思想。Ubuntu 的目标在于为一般用户提供一个最新的、同时又相当稳定的主要由自由软件构建而成的操作系统。

    123 引用 • 168 回帖
  • jsoup

    jsoup 是一款 Java 的 HTML 解析器,可直接解析某个 URL 地址、HTML 文本内容。它提供了一套非常省力的 API,可通过 DOM,CSS 以及类似于 jQuery 的操作方法来取出和操作数据。

    6 引用 • 1 回帖 • 473 关注
  • 负能量

    上帝为你关上了一扇门,然后就去睡觉了....努力不一定能成功,但不努力一定很轻松 (° ー °〃)

    88 引用 • 1234 回帖 • 441 关注
  • abitmean

    有点意思就行了

    39 关注
  • 资讯

    资讯是用户因为及时地获得它并利用它而能够在相对短的时间内给自己带来价值的信息,资讯有时效性和地域性。

    54 引用 • 85 回帖
  • gRpc
    11 引用 • 9 回帖 • 49 关注
  • TensorFlow

    TensorFlow 是一个采用数据流图(data flow graphs),用于数值计算的开源软件库。节点(Nodes)在图中表示数学操作,图中的线(edges)则表示在节点间相互联系的多维数据数组,即张量(tensor)。

    20 引用 • 19 回帖 • 1 关注
  • 运维

    互联网运维工作,以服务为中心,以稳定、安全、高效为三个基本点,确保公司的互联网业务能够 7×24 小时为用户提供高质量的服务。

    148 引用 • 257 回帖
  • 锤子科技

    锤子科技(Smartisan)成立于 2012 年 5 月,是一家制造移动互联网终端设备的公司,公司的使命是用完美主义的工匠精神,打造用户体验一流的数码消费类产品(智能手机为主),改善人们的生活质量。

    4 引用 • 31 回帖 • 8 关注
  • ngrok

    ngrok 是一个反向代理,通过在公共的端点和本地运行的 Web 服务器之间建立一个安全的通道。

    7 引用 • 63 回帖 • 613 关注
  • CAP

    CAP 指的是在一个分布式系统中, Consistency(一致性)、 Availability(可用性)、Partition tolerance(分区容错性),三者不可兼得。

    11 引用 • 5 回帖 • 580 关注
  • 游戏

    沉迷游戏伤身,强撸灰飞烟灭。

    171 引用 • 814 回帖
  • ActiveMQ

    ActiveMQ 是 Apache 旗下的一款开源消息总线系统,它完整实现了 JMS 规范,是一个企业级的消息中间件。

    19 引用 • 13 回帖 • 641 关注