mysql2pgsql

工具 mysql2pgsql 支持不落地的把 MYSQL 中的表迁移到 HybridDB/Greenplum Database/PostgreSQL/PPAS。此工具的原理是，同时连接源端 mysql 数据库和目的端数据库，从 mysql 库中通过查询得到要导出的数据，然后通过 COPY 命令导入到目的端。此工具支持多线程导入（每个工作线程负责导入一部分数据库表）。

参数配置

修改配置文件 my.cfg、配置源和目的库连接信息。

• 源库 mysql 的连接信息如下：

  注意：源库 mysql 的连接信息中，用户需要有对所有用户表的读权限。

  1. [src.mysql]
     
  2. host = "127.0.0.1"
     
  3. port = "3307"
     
  4. user = "root"
     
  5. password = "ESBecs00!@#"
     
  6. db = "devops"
     
  7. encodingdir = "share"
     
  8. encoding = "utf8"
     
  9. binlogfile = "mysql-bin.000001"
     
  10. binlogfile_offset = "4"
      
  11. serverid = 13307

  
  

• 目的库 pgsql （包括 Postgresql、PPAS 和 HybridDB ）的连接信息如下：

  注意：目的库 pgsql 的连接信息，用户需要对目标表有写的权限。

  1. [desc.pgsql]
     
  2. connect_string = "host=127.0.0.1 dbname=exampledb port=5432 user=testpg password=testpg"
     
  3. target_schema = "public"
     
  4. ignore_copy_error_count_each_table = "0"

  
  

mysql2pgsql 用法

mysql2pgsql 的用法如下所示：
        ./mysql2pgsql -l  -d -n -j <number of threads> -s <schema of target able> 

参数说明：

• -l：可选参数，指定一个文本文件，文件中含有需要同步的表；如果不指定此参数，则同步配置文件中指定数据库下的所有表。为一个文件名，里面含有需要同步的表集合以及表上查询的条件，其内容格式示例如下：
  

  1. table1 : select * from table_big where column1 < '2016-08-05'
     
  2. table2 :
     
  3. table3
     
  4. table4: select column1, column2 from tableX where column1 != 10
     
  5. table5: select * from table_big where column1 >= '2016-08-05
  
  

• -d：可选参数，表示只生成目的表的建表 DDL 语句，不实际进行数据同步。

• -n：可选参数，需要与-d一起使用，指定在 DDL 语句中不包含表分区定义。

• -j：可选参数，指定使用多少线程进行数据同步；如果不指定此参数，会使用 5 个线程并发。

• -s：可选参数，指定目标表的schema，一次命令只能指定一个schema。如果不指定此参数，则数据会导入到public下的表。

典型用法

全库迁移

全库迁移的操作步骤如下所示：

1. 通过如下命令，获取目的端对应表的 DDL。
   ./mysql2pgsql -d 
   

2. 根据这些 DDL，再加入 distribution key 等信息，在目的端创建表。
   

3. 执行如下命令，同步所有表：
   ./mysql2pgsql 

   此命令会把配置文件中所指定数据库中的所有 mysql 表数据迁移到目的端。过程中使用 5 个线程（即缺省线程数为 5），读取和导入所有涉及的表数据。

部分表迁移

1. 编辑一个新文件 tab_list.txt，放入如下内容：
   

   1. t1
      
   2. t2 : select * from t2 where c1 > 138888

2. 执行如下命令，同步指定的 t1 和 t2 表（注意 t2 表只迁移符合 c1 > 138888 条件的数据）：
   

   1. ./mysql2pgsql -l tab_list.txt