TiDB 中的基本 SQL 操作
成功部署TiDB集群之后,便可以在TiDB中执行SQL语句了。因为TiDB兼容MySQL,你可以使用MySQL客户端连接TiDB,并且大多数情况下可以直接执行MySQL语句。本文介绍CRUD操作等基本的SQL语句。完整的SQL语句列表,参见TiDBSQL语法详解。创建、查看和删除数据库使用CREAT
TiDB V4.0 Roadmap
TiDBTiDBServer功能支持TiFlash存储引擎支持OptimizerTrace支持多列统计信息为普通CM-Sketch支持TopN统计信息完善PlanCache功能支持自适应SQL引擎支持SQLTuningAdvisor支持SQLPlanManagement事务悲观锁GA事务内不限制语句
TiDB Data Migration 术语表
本文档介绍TiDBDataMigration(TiDBDM)相关术语。BBinlog在TiDBDM中,Binlog通常指MySQL/MariaDB生成的binarylog文件,具体请参考MySQLBinaryLog与MariaDBBinaryLog。BinlogeventMySQL/MariaDB生
Data Migration 常见问题
DM是否支持同步阿里RDS以及其他云数据库的数据?DM仅支持解析标准版本的MySQL/MariaDB的binlog,对于阿里云RDS以及其他云数据库没有进行过测试,如果确认其binlog为标准格式,则可以支持。task配置中的黑白名单的正则表达式是否支持非获取匹配(?!)?目前不支持,DM仅支持go
Data Migration 常见错误修复
本文档介绍DM中常见的错误以及修复方法。常见错误说明和处理方法同步任务中断并包含invalidconnection错误发生invalidconnection错误时,通常表示DM到下游TiDB的数据库连接出现了异常(如网络故障、TiDB重启、TiKVbusy等)且当前请求已有部分数据发送到了TiDB。
Data Migration 错误说明
本文介绍了DataMigration(DM)的错误系统,以及各种错误信息的详细含义。DM错误系统DM1.0.0-GA版本中引入了新的错误系统。该系统:增加了错误码机制。增加了class、scope、level等错误信息。优化了错误描述内容、错误调用链信息和调用堆栈信息。错误系统的详细设计和实现,可参
Data Migration 故障诊断
本文总结了在DM工具使用过程中遇到问题的诊断流程,并指引用户通过错误信息查找相应的解决方案。如果你在运行DM工具时出现了错误,请尝试以下解决方案:执行query-status命令查看任务运行状态以及相关错误输出。查看与该错误相关的日志文件。日志文件位于DM-master、DM-worker部署节点上
DM Portal 简介
当前版本的DM提供了丰富多样的功能特性,包括Black&whitetablelists,DM任务配置的时候。针对这个问题,DM提供了一个精简的网页程序DMPortal,能够帮助用户以可视化的方式去配置需要的同步任务,并且生成可以直接让DM直接执行的task.yaml文件。功能描述本节简要介绍
从 MySQL 迁移数据 —— 以 Amazon Aurora MySQL 为例
本文以AmazonAuroraMySQL为例介绍如何使用DM从MySQL协议数据库迁移数据到TiDB。第1步:在Aurora集群中启用binlog假设有两个Aurora集群需要迁移数据到TiDB,其集群信息如下,其中Aurora-1包含一个独立的读取器节点。集群终端节点端口角色Aurora-1pin
DM 监控指标
使用DM-Ansible部署DM集群的时候,会默认部署一套监控系统。注意:监控系统。Task监控系统。overview监控系统。task状态metric名称说明告警说明告警级别taskstate同步子任务的状态当子任务状态处于paused超过10分钟时critical监控系统。Dump/Loadun
跳过或替代执行异常的 SQL 语句
本文介绍了如何使用DM来处理异常的SQL语句。目前,TiDB并不完全兼容所有的MySQL语法(详见TiDB已支持的DDL语句)。当使用DM从MySQL同步数据到TiDB时,如果TiDB不支持对应的SQL语句,可能会造成错误并中断同步任务。在这种情况下,DM提供以下两种方式来恢复同步:使用dmctl来
DM 查询状态
本文介绍DM(DataMigration)query-status命令的查询结果、任务状态与子任务状态。查询结果»query-status{"result":true,#查询是否成功。"msg":"",#查询失败原因描述。"tasks":[#迁移task列表{"taskName":"test-1",
上游 MySQL 实例配置前置检查
本文介绍了DM提供的前置检查功能,此功能用于在数据同步任务启动时提前检测出上游MySQL实例配置中可能存在的一些错误。使用命令check-task命令用于对上游MySQL实例配置是否满足DM要求进行前置检查。检查内容上下游数据库用户必须具备相应读写权限。当数据同步任务启动时,DM会自动检查下列权限和
管理数据同步任务
本文介绍了如何使用dmctl组件来进行数据同步任务的管理和维护。对于用DM-Ansible部署的DM集群,dmctl二进制文件路径为dmctl支持交互模式用于人工操作,同时也支持命令模式用于脚本。dmctl组件来进行数据同步任务的管理和维护。对于用DM-Ansible部署的DM集群,dmctl二进制
DM 版本升级
本文档主要介绍各DM(DataMigration)版本间的升级操作步骤。注意:若无特殊说明,各版本的升级操作均为从前一个有升级指引的版本向当前版本升级。若无特殊说明,各升级操作示例均假定已经下载了对应版本的DM和DM-Ansible且DMbinary存在于DM-Ansible的相应目录中(下载DMb
DM 集群操作
本文介绍DM集群操作以及使用DM-Ansible管理DM集群时需要注意的事项。启动集群运行以下命令以启动整个集群的所有组件(包括DM-master、DM-worker和监控组件):ansible-playbookstart.yml下线集群运行以下命令以下线整个集群的所有组件(包括DM-master、
DM 任务配置文件介绍
本文档主要介绍DataMigration(DM)的任务基础配置文件task_basic.yaml,包含实例配置两部分。完整的任务配置参见数据同步功能。关键概念关于包括source-id和DM-workerID在内的关键概念的介绍,请参阅关键概念。下面是一个基础的配置文件示例,通过该示例可以完成简单的
DM-worker 配置文件介绍
本文档主要介绍DM-worker的基础配置文件。在一般场景中,用户只需要使用基础配置即可完成DM-worker的部署。完整配置项参考DM-worker完整配置说明。#WorkerConfiguration.#Logconfiguration.log-file="dm-worker.log"#DM-w
DM-master 配置文件介绍
本文介绍DM-master的配置文件,包括配置文件示例与配置项说明。配置文件示例DM-master的示例配置文件如下所示:#logconfigurationlog-file="dm-master.log"#DM-masterlisteningaddressmaster-addr=":8261"#DM
DM 配置简介
本文档简要介绍DM(DataMigration)的配置文件和数据同步任务的配置。配置文件inventory.ini:使用DM-Ansible部署DM集群的配置文件。需要根据所选用的集群拓扑来进行编辑。详见DM-master配置文件介绍dm-worker.toml:DM-worker进程的配置文件,包