数据仓库服务(Data Warehouse Service,简称DWS)基于华为FusionInsight LibrA企业级数据仓库内核,提供即开即用、可扩展且完全托管的分析型数据库服务。用户开通数据仓库服务后,往往需要从其他关系数据库迁移数据,本人最近使用数据迁移服务在将MYSQL上的数据迁移到华为云数据仓库服务,进行一下总结。
我的需求是首先将存储在MYSQL上的部分表历史数据一次性全部迁移到数仓,然后希望每天将MYSQL上的交易、日志表信息增量同步到数仓。数据迁移服务提供了图形化向导式界面,支持从主流关系数据库、HBase、对象存储、文件系统等数据源迁移到数仓。
创建数据迁移服务集群
使用数据迁移服务首先需要创建一个集群,集群秒级创建成功,费用按运行时和关机两种情况进行不同计费,没有迁移任务时,可以选择关机(后面版本可以自动关机)。创建集群成功后,点击作业管理可以创建连接和迁移作业。
创建连接
从MYSQL迁移到数仓,需要分别创建MYSQL和数仓连接,连接主要保存着数据源的连接信息,包括IP、端口、用户名、密码等。
图:创建MYSQL连接参数