创建 TiDB Data Migration 数据源

本文档介绍如何为 TiDB Data Migration (DM) 的数据迁移任务创建数据源。

数据源包含了访问迁移任务上游所需的信息。数据迁移任务需要引用对应的数据源来获取访问配置信息。因此，在创建数据迁移任务之前，需要先创建任务的数据源。详细的数据源管理命令请参考管理上游数据源。

第一步：配置数据源

1. （可选）加密数据源密码

   在 DM 的配置文件中，推荐使用经 dmctl 加密后的密文密码。按照下面的示例可以获得数据源的密文密码，用于下一步编写数据源配置文件。

   从 v8.0.0 开始，DM-master 必须配置 secret-key-path 后才可使用 tiup dmctl encrypt 命令。

   tiup dmctl encrypt 'abc!@#123'
   

   MKxn0Qo3m3XOyjCnhEMtsUCm83EhGQDZ/T4=
   

2. 编写数据源配置文件

   每个数据源需要一个单独的配置文件来创建数据源。按照下面示例创建 ID 为 "mysql-01" 的数据源，创建数据源配置文件 ./source-mysql-01.yaml：

   source-id: "mysql-01"    # 数据源 ID，在数据迁移任务配置和 dmctl 命令行中引用该 source-id 可以关联到对应的数据源
   
   from:
     host: "127.0.0.1"
     port: 3306
     user: "root"
     password: "MKxn0Qo3m3XOyjCnhEMtsUCm83EhGQDZ/T4=" # 推荐使用 dmctl 对上游数据源的用户密码加密之后的密码
     security:                                        # 上游数据源 TLS 相关配置。如果没有需要则可以删除
       ssl-ca: "/path/to/ca.pem"
       ssl-cert: "/path/to/cert.pem"
       ssl-key: "/path/to/key.pem"
   

第二步：创建数据源

使用如下命令创建数据源：

tiup dmctl --master-addr <master-addr> operate-source create ./source-mysql-01.yaml

数据源配置文件的其他配置参考数据源配置文件介绍。

命令返回结果如下：

{
    "result": true,
    "msg": "",
    "sources": [
        {
            "result": true,
            "msg": "",
            "source": "mysql-01",
            "worker": "dm-worker-1"
        }
    ]
}

第三步：查询创建的数据源

创建数据源后，可以使用如下命令查看创建的数据源：

• 如果知道数据源的 source-id，可以通过 dmctl config source <source-id> 命令直接查看数据源配置：

  tiup dmctl --master-addr <master-addr> config source mysql-01
  

  {
    "result": true,
    "msg": "",
    "cfg": "enable-gtid: false
      flavor: mysql
      source-id: mysql-01
      from:
        host: 127.0.0.1
        port: 3306
        user: root
        password: '******'
  }
  

• 如果不知道数据源的 source-id，可以先通过 dmctl operate-source show 命令查看源数据库列表，从中可以找到对应的数据源。

  tiup dmctl --master-addr <master-addr> operate-source show
  

  {
      "result": true,
      "msg": "",
      "sources": [
          {
              "result": true,
              "msg": "source is added but there is no free worker to bound",
              "source": "mysql-02",
              "worker": ""
          },
          {
              "result": true,
              "msg": "",
              "source": "mysql-01",
              "worker": "dm-worker-1"
          }
      ]
  }