当前位置: 首页 > news >正文

一分钟了解阿里云产品:数据传输

一、             概述

 

阿里云发布了很多产品,今天让我们一起来了解下数据传输(Data Transmission) 吧。

 

什么是数据传输呢?

 

阿里云数据传输支持以数据库为核心的结构化存储产品之间的数据传输。 它是一种集数据迁移、数据订阅及数据实时同步于一体的数据传输服务。 数据传输的底层数据流基础设施为阿里双11异地双活基础架构, 为数千下游应用提供实时数据流,已在线上稳定运行3年之久。 您可以使用数据传输轻松构建安全、可扩展、高可用的数据架构。

 

 

那么,数据传输有什么优势呢?接下来让我来说说吧。

 

  • 数据传输支持同异构数据源之间的迁移同步,支持迁移订阅同步等多种传输方式,增量迁移可以实现应用无缝切换。

 

  • 数据传输服务使用高规格服务器来保证每条迁移同步链路都能拥有良好的传输性能。相对于传统的数据同步工具,数据传输服务的实时同步功能能够将并发粒度缩小到事务级别,甚至能够并发同步同张表内的数据,从而极大得提升同步性能。

 

  • 数据传输服务底层为服务集群,集群内任何一个节点宕机或发生故障,控制中心都能够将这个节点上的所有任务秒级切换到其他节点上,链路稳定性高达99.95%。数据传输服务内部对迁移同步链路提供7*24小时的数据准确性校验,快速发现并纠正传输数据,保证传输数据可靠性。数据传输服务各模块间采用安全传输协议及安全token认证,有效得保证数据传输可靠性。

 

  • 数据传输服务提供可视化管理界面,提供向导式的链路创建流程,用户可以在其控制台简单轻松得创建自己的传输链路。数据传输服务控制台展示了链路的传输状态及进度,传输性能等信息,用户可以方便管理自己的传输链路。

 

 

可能您会问到,“我处在什么样的应用或服务场景时,可以选择数据传输呢?”这里介绍下数据传输的常见应用场景:

 

  • 上云迁移
  •  数据库拆分
  •  本地灾备、异地灾备
  •  数据分析
  •  解决跨地区读延迟

 

通过我的介绍,希望大家能有所收获。

 

数据传输典型特性介绍:

https://www.aliyun.com/product/dts/?spm=5176.2066478.3.13.VnKETC

 

 

 

二、             技术点(数据传输五大热点技术问题分析)

 

在上一篇文章中,我们为大家介绍数据传输的概况,数据传输(Data Transmission)是阿里云提供的一种支持以数据库为核心的结构化存储产品之间的数据传输服务,它提供了数据迁移、数据订阅及实时同步等多种数据传输功能。使用数据传输服务实现数据一键上云的同时,您还可以轻松得构建安全、可扩展、高可用的数据架构。那在使用过程中,经常遇到的热门技术问题有哪些呢?

 

创建数据迁移任务:

https://help.aliyun.com/document_detail/dts/Getting-Started/data-migration.html?spm=5176.docdts/Getting-Started/Open-DTS-service.6.92.uLWroC

 

创建实时同步作业:

https://help.aliyun.com/document_detail/dts/Getting-Started/data-synchronous.html?spm=5176.docdts/Getting-Started/data-migration.6.94.UsgftV

 

创建订阅通道:

https://help.aliyun.com/document_detail/dts/Getting-Started/data-subscription.html?spm=5176.docdts/Getting-Started/data-synchronous.6.95.vxWuDI

 

库名不同的数据库之间的数据迁移:

https://help.aliyun.com/document_detail/dts/Best-Practice/Data-Migration-For-Databases-with-different-Ident.html?spm=5176.docdts/Getting-Started/data-subscription.6.130.ZNrxqD

 

利用数据订阅实现本地灾备:

https://help.aliyun.com/document_detail/dts/Best-Practice/Build-local-disaster-preparedness-with-Data-subscription.html?spm=5176.docdts/Best-Practice/Data-Migration-For-Databases-with-different-Ident.6.136.6benle

 

 

希望上面的内容,能够对大家有所帮助。

 

 

 

三、             体验(跨阿里云账号的ECS自建数据库迁移至RDS

 

下面我为大家来介绍下应用数据传输的相关体验。

 

 

DTS数据迁移任务,如果配置连接方式时,源实例选择ECS上的自建数据库,那么要求这个ECS实例跟目标RDS必须属于同一个阿里云账号。如果要实现某一个阿里云账号下的源ECS实例上的自建数据库迁移到另外一个阿里云账号下的RDS实例。那么源实例类型必须选择有公网IP的自建数据库。

 

 

本小节介绍如何利用DTS试下跨阿里云账号的ECS自建数据库迁移至RDS。

 

RDS实例数据库创建

在配置DTS迁移任务之前,待迁入数据库在目标RDS实例中必须已经存在。如果未创建,需要在RDS控制台创建。

658e4716cc60e9e4ac82fd4a0acb8f24e063deb4

 

 

 迁移账号创建

 

在配置迁移任务时,需要配置目标RDS实例的迁移账号,如果未创建迁移账号,那么在配置迁移任务之前,需要先在目标RDS实例中创建迁移帐号,并将要迁移的库的读写权限授权给上面创建的帐号。

ed7fcdecbdef2e54afc18c898ea4ecfabb5aa991

 

配置迁移任务

 

下面以将阿里云账号A下面的ECS实例上的自建数据库的库amptest1的数据迁移到另外一个阿里云账号B的RDS实例为例,介绍如何在DTS任务配置时实现跨阿里云账号的ECS自建数据库迁移至RDS。

 

1)  进入DTS控制台,点击创建迁移任务,正式开始任务创建。

e974f0ea39cd5e53eead88b01d10a27e37285341

 

2)  填写配置源及目标RDS实例的连接信息

70cf84fecb021361abd128948e31430973478a81

 

这里面源实例的实例类型需要选择“有公网IP的自建数据库”,源实例的主机名或IP地址填写ECS实例的公网IP

 

3)  选择迁移类型及迁移对象

 

3b768db1238e66cc20e50d44db22324ec4f1f4f5

 

在这个步骤需要配置要迁移的对象列表。 配置完后,进入迁移预检查

 

4) 预检查

3fb32d17f77e23d98f1f4de36edaab4839298348

 

当预检查通过后,可以启动迁移任务

 

5)  启动迁移任务

02a4f52f0e97f3eec2514361444d75349e317c7b

至此,完成跨阿里云账号的ECS自建数据库迁移至RDS的迁移任务配置。

 

如果您想详细了解数据传输,请访问:

https://help.aliyun.com/document_detail/dts/Best-Practice/Data-Migration-Between-ECS-And-RDS-belong-to-different-account.html?spm=5176.docdts/Best-Practice/Data-Migration-Between-RDS-instance-belong-to-different-account.6.133.vWEsOq



触发器存在情况下如何配置同步作业:

https://help.aliyun.com/document_detail/dts/Best-Practice/Config-Synchronous-Database-Trigger-Exists.html?spm=5176.docdts/Best-Practice/SDK-Failover.6.136.sRnnXI

 

 

相关文章:

  • java集合深入理解(二):Collection接口的特点与理解
  • Msc系统上的eclipse遇到乱码问题解决方式
  • java集合深入理解(三):ArrayList、Vector、LinkedList的底层源码分析和对比
  • java集合深入理解(四):Set接口及其实现类HashSet、TreeSet的底层结构与区别
  • WPS for Linux(ubuntu)字体配置(字体缺失解决办法)
  • java集合深入理解(五):HashMap、HashTable、TreeMap的底层源码分析和对比
  • java核心基础之java反射机制详解
  • Android Pdf文档的生成、显示与打印
  • java核心基础之代理机制详解(静态代理、动态代理:JDK、CGlib)
  • Spring事务管理详解(传播属性、隔离级别)
  • 5分钟学会使用Less预编译器
  • RabbitMQ学习系列(一):RabbitMQ的了解安装和使用
  • RabbitMQ学习系列(二):简单队列详解
  • spring学习笔记(4)依赖注入详解
  • RabbitMQ学习系列(三):工作队列详解
  • [译]Python中的类属性与实例属性的区别
  • 【Amaple教程】5. 插件
  • 【刷算法】求1+2+3+...+n
  • Apache Zeppelin在Apache Trafodion上的可视化
  • javascript面向对象之创建对象
  • javascript数组去重/查找/插入/删除
  • jquery ajax学习笔记
  • Median of Two Sorted Arrays
  • V4L2视频输入框架概述
  • vue2.0项目引入element-ui
  • 番外篇1:在Windows环境下安装JDK
  • 你不可错过的前端面试题(一)
  • 爬虫模拟登陆 SegmentFault
  • 扫描识别控件Dynamic Web TWAIN v12.2发布,改进SSL证书
  • No resource identifier found for attribute,RxJava之zip操作符
  • 仓管云——企业云erp功能有哪些?
  • 带你开发类似Pokemon Go的AR游戏
  • ​​​【收录 Hello 算法】10.4 哈希优化策略
  • ​DB-Engines 11月数据库排名:PostgreSQL坐稳同期涨幅榜冠军宝座
  • ​io --- 处理流的核心工具​
  • ​人工智能之父图灵诞辰纪念日,一起来看最受读者欢迎的AI技术好书
  • # 消息中间件 RocketMQ 高级功能和源码分析(七)
  • #pragma 指令
  • (1)Map集合 (2)异常机制 (3)File类 (4)I/O流
  • (20)目标检测算法之YOLOv5计算预选框、详解anchor计算
  • (C#)获取字符编码的类
  • (pojstep1.1.2)2654(直叙式模拟)
  • (二)windows配置JDK环境
  • (附源码)springboot教学评价 毕业设计 641310
  • (经验分享)作为一名普通本科计算机专业学生,我大学四年到底走了多少弯路
  • (转)关于pipe()的详细解析
  • *(长期更新)软考网络工程师学习笔记——Section 22 无线局域网
  • .FileZilla的使用和主动模式被动模式介绍
  • .NET 实现 NTFS 文件系统的硬链接 mklink /J(Junction)
  • .NET 中的轻量级线程安全
  • .NET3.5下用Lambda简化跨线程访问窗体控件,避免繁复的delegate,Invoke(转)
  • .net安装_还在用第三方安装.NET?Win10自带.NET3.5安装
  • .NET简谈设计模式之(单件模式)
  • .net流程开发平台的一些难点(1)
  • .sdf和.msp文件读取