TiDB at 丰巢:尝鲜分布式数据库
随着丰巢业务系统快速增长,其核心系统的数据量,早就跨越了亿级别,而且每年增量仍然在飞速发展。整个核心系统随着数据量的压力增长,不但系统架构复杂度急剧增长,数据架构更加复杂,传统的单节点数据库,已经日渐不能满足丰巢的需求,当单表数量上亿的时候,Oracle还能勉强抗住,而MySQL到单表千万级别的时候
TiDB 在小米的应用实践
作者:张良,小米DBA负责人;潘友飞,小米DBA;王必文,小米开发工程师。一、应用场景介绍MIUI是小米公司旗下基于Android系统深度优化、定制、开发的第三方手机操作系统,也是小米的第一个产品。MIUI在Android系统基础上,针对中国用户进行了深度定制,在此之上孕育出了一系列的应用,比如主题
TiDB 在小红书从 0 到 200+ 节点的探索和应用
作者介绍:张俊骏,小红书数据库与中间件团队负责人小红书使用TiDB历史可以追溯到2017年甚至更早,那时在物流、仓库等对新技术比较感兴趣的场景下应用,在2018年5月之后,我们就开始逐步铺开,延展到其他适合TiDB的场景中去。截止目前,小红书使用的TiDB节点数在200+个,未来也有更大扩展空间。本
TiKV 在京东云对象存储元数据管理的实践
作者介绍:崔灿,京东云产品研发部专家架构师,目前主要负责京东云对象存储产品的工作。京东云对象存储是在2016年作为公有云对外公开的,主要特点是可靠、安全、海量、低成本,应用于包括一些常用的业务场景,比如面向京东云公有云外部的开发者的服务,和面向政府、企业的私有云服务,甚至混合云服务。本文将介绍京东云
网易互娱的数据库选型和 TiDB 应用实践
作者介绍:李文杰,网易互娱计费组,高级数据库管理工程师,TiDBUserGroupAmbassador。一、业务架构简介计费组是为网易互娱产品提供统一登录和支付高效解决方案的公共支持部门,对内是互娱的各个游戏工作室,对外是国内外数百个渠道。由于业务场景的特殊性,我们为各个游戏产品部署了不同的应用服务
美团点评携手 PingCAP 开启新一代数据库深度实践之旅
作者介绍:赵应钢,美团点评研究员;李坤,美团点评数据库专家;朴昌俊,美团点评数据库专家。一、背景和现状在美团,基于MySQL构建的传统关系型数据库服务已经难于支撑公司业务的爆发式增长,促使我们去探索更合理的数据存储方案和实践新的运维方式。随着近一两年来分布式数据库大放异彩,美团DBA团队联合架构存储
为什么我们要从 MySQL 迁移到 TiDB?
作者介绍:贺磊,360数据库运维资深工程师,《MongoDB运维实战作者》,知名论坛MySQL版主,51CTO博客之星,闲暇之余,喜欢将部分案例写成博客,累计访问量过百万。我先说几个最让你兴奋和开心的点吧:在TiDB里,你完全不用担心磁盘容量的问题。在TiDB里,原生支持OnlineDDL,你完全不
TiDB 在知乎万亿量级业务数据下的实践和挑战
作者:孙晓光,知乎搜索后端负责人,目前承担知乎搜索后端架构设计以及工程团队的管理工作。曾多年从事私有云相关产品开发工作关注云原生技术,TiKV项目Committer。本文根据孙晓光老师在TiDBTechDay2019北京站上的演讲整理。本次分享首先将从宏观的角度介绍知乎已读服务的业务场景中的挑战、架
使用 DM binary 部署 DM 集群
本文将介绍如何使用DMbinary快速部署DM集群。准备工作下载官方binary,链接地址:DM下载。使用样例DM下载。MySQL1和MySQL2中需要开启binlog。DM-worker1负责同步MySQL1的数据,DM-worker2负责同步MySQL2的数据。下面以此为例,说明如何部署DM。D
使用 DM-Ansible 部署 DM 集群
DM-Ansible是PingCAP基于Ansible的Playbooks研发的DM(DataMigration)集群部署工具。本文将介绍如何使用DM-Ansible快速部署DM集群。准备工作在开始之前,先确保您准备好了以下配置的机器:部署目标机器若干,配置如下:CentOS7.3(64-bit)或
集群拓扑信息配置
概述PD能够根据TiKV集群的拓扑结构进行调度,使得TiKV的容灾能力最大化。阅读本章前,请先确保阅读TiDBAnsible部署方案和Docker部署方案。TiKV上报拓扑信息可以通过TiKV的启动参数或者配置文件来让TiKV上报拓扑信息给PD。假设拓扑结构分为三级:zone>rack>
跨数据中心部署方案
作为NewSQL数据库,TiDB兼顾了传统关系型数据库的优秀特性以及NoSQL数据库可扩展性,以及跨数据中心(下文简称“中心”)场景下的高可用。本文档旨在介绍跨数据中心部署的不同解决方案。三中心部署方案TiDB,TiKV,PD分别分布在3个不同的中心,这是最常规,可用性最高的方案。优点所有数据的副本
TiDB Docker 部署方案
本文介绍如何使用Docker部署一个多节点的TiDB集群。警告:对于生产环境,不要使用Docker进行部署,而应使用TiUP部署TiDB集群。环境准备安装DockerDocker可以方便地在Linux/MacOS/Windows平台安装,安装方法请参考Docker官方文档。拉取TiDB的Docker
离线 TiDB Ansible 部署方案
准备机器下载机一台该机器需开放外网访问,用于下载TiDBAnsible、TiDB及相关软件安装包。推荐安装CentOS7.3及以上版本Linux操作系统。部署目标机器若干及部署中控机一台系统要求及配置参考准备机器。可以无法访问外网。在中控机上安装系统依赖包在下载机上下载系统依赖离线安装包,然后上传至
使用 TiDB Ansible 部署 TiDB 集群
Ansible是一款自动化运维工具,TiDBAnsible是PingCAP基于Ansibleplaybook功能编写的集群部署工具。本文档介绍如何使用TiDBAnsible部署一个完整的TiDB集群。本部署工具可以通过配置文件设置集群拓扑,完成以下各项运维工作:初始化操作系统参数部署TiDB集群(包
使用 TiUP 部署 TiDB 集群
TiUP是TiDB4.0版本引入的集群运维工具,TiUPcluster是TiUP提供的使用Golang编写的集群管理组件,通过TiUPcluster组件就可以进行日常的运维工作,包括部署、启动、关闭、销毁、弹性扩缩容、升级TiDB集群;管理TiDB集群参数;部署TiDBBinlog;部署TiFlas
TiDB 软件和硬件环境建议配置
TiDB作为一款开源分布式NewSQL数据库,可以很好的部署和运行在Intel架构服务器环境及主流虚拟化环境,并支持绝大多数的主流硬件网络。作为一款高性能数据库系统,TiDB支持主流的Linux操作系统环境。Linux操作系统版本要求Linux操作系统平台版本RedHatEnterpriseLinu
为 TiDB 组件间开启 TLS
本文主要描述了在Kubernetes上如何为TiDB集群组件间开启TLS。TiDBOperator从v1.1开始已经支持为Kubernetes上TiDB集群组件间开启TLS。开启步骤为:为即将被创建的TiDB集群的每个组件生成证书:为PD/TiKV/TiDB/Pump/Drainer组件分别创建一套
为 MySQL 客户端开启 TLS
本文主要描述了在Kubernetes上如何为TiDB集群的MySQL客户端开启TLS。TiDBOperator从v1.1开始已经支持为Kubernetes上TiDB集群开启MySQL客户端TLS。开启步骤为:为TiDBServer颁发一套Server端证书,为MySQLClient颁发一套Clien
Kubernetes 上的 TiDB 工具指南
Kubernetes上的TiDB运维管理需要使用一些开源工具。同时,在Kubernetes上使用TiDB生态工具时,也有特殊的操作要求。本文档详细描述Kubernetes上的TiDB相关的工具及其使用方法。在Kubernetes上使用PDControlPDControl是PD的命令行工具,在使用PD