TiDB
TiDB是一个开源的NewSQL数据库,支持混合事务和分析处理(HTAP)工作负载[3]。它与MySQL兼容,并且可以提供水平可扩展性、强一致性和高可用性。它主要由PingCAP公司开发和支持,并在Apache 2.0下授权。TiDB从Google的Spanner[4]和F1[5]论文中汲取了最初的设计灵感。[6]
開發者 | 北京平凯星辰科技发展有限公司(PingCAP) |
---|---|
首次发布 | 2017年10月15日[1] |
当前版本 |
|
源代码库 | |
编程语言 | Go (TiDB), Rust (TiKV) |
语言 | 英文、中文 |
类型 | NewSQL |
许可协议 | Apache 2.0 |
网站 | pingcap |
TiDB被InfoWorld 2018 Bossie Award评选为最佳数据存储和分析开源软件之一。[7]
历史
PingCAP Inc.是一家软件公司,成立于2015年4月,成立后便开始开发TiDB。该公司是TiDB及其关联的开源社区的主要开发人员,维护人员和驱动者。[8]
主要特性
水平可扩展性
TiDB可以通过添加新节点来扩展SQL处理和存储容量。这使得基础设施容量的扩展更加容易和灵活,而传统的关系数据库只能垂直扩展。
MySQL兼容性
对于应用程序来说,TiDB的行为就如同一个MySQL 5.7服务器。用户可以继续使用所有现有的MySQL客户端库。因为TiDB的SQL处理层是从头开始构建的,而不是一个MySQL分支,所以它的兼容性不是100%,[9]而且MySQL和TiDB之间存在已知的行为差异。[10]
云原生
为了使部署、配置、操作和维护更加灵活,TiDB被设计成可在云中工作。TiDB的存储层称为TiKV,于2018年8月成为云原生计算基金会的沙盒级别项目。[12]TiDB平台的体系结构还允许分别独立扩展SQL处理和存储。
部署方法
Kubernetes Operator
可以使用TiDB Operator将TiDB部署到支持Kubernetes的云环境中。[14]Operator是打包、部署和管理Kubernetes应用程序的方法。它是为运行有状态工作负载而设计的,最早由CoreOS在2016年引入。[15]TiDB Operator[16]最初由PingCAP开发,并于2018年8月开源。[17]TiDB Operator可以用于在笔记本电脑[18]、Google Cloud Platform的Google Kubernetes引擎[19]和Amazon Web Services的Kubernetes弹性容器服务上部署TiDB。[20]
Ansible
通过使用TiDB-Ansible playbook,可以使用Ansible (軟體)部署TiDB。[21]
工具
TiDB提供了一系列开源工具来帮助现有MySQL和MariaDB用户进行数据复制和迁移。
Syncer与Data Migration
Syncer是一个工具,它支持从MySQL或MariaDB实例到TiDB集群的完整数据迁移或增量数据复制。[23]Data Migration(DM)是 Syncer的第二代迭代,它适合将已分片的MySQL或MariaDB表中的数据复制到TiDB。[24]Syncer/DM的一个常见用例是将MySQL或MariaDB表连接到TiDB,几乎将TiDB视为从属,然后在该TiDB集群上直接实时运行分析工作负载。
Lightning
Lightning是一个可将大型MySQL转储高速完全导入到新的TiDB群集中的工具,它提供了比执行每个SQL语句更快的导入体验。该工具用于把大量数据快速填充到一个最初为空的TiDB集群,以便加快测试或生产迁移。之所以能提升导入速度,是因为TiDB通过将SQL语句解析为键值对,然后直接生成有序字符串表(SSTable)文件到RocksDB。[25]
TiDB-Binlog
TiDB-Binlog是一个用于收集对TiDB集群所做逻辑更改的工具。它用于在两个TiDB集群之间或从一个TiDB集群到另一个下游平台之间提供增量备份和复制。
它的功能类似于MySQL主从复制。主要的区别在于,由于TiDB是一个分布式数据库文件管理器,因此每个TiDB实例生成的binlog需要在被下游使用之前,根据事务提交的时间进行合并和排序。[26]
用户案例
目前,已有近3000家公司在使用 TiDB,其中包括Mastercard、AirBNB、Square、Paypay、中国银行、建设银行、美团、Bilibili、Shopee[27]、BookMyShow[28]、小米[29]、知乎[30]、美团点评[31]、爱奇艺[32], 转转[33]、摩拜[34]、易果[35],以及猿辅导[36]。
参考文献
- .
- . 2024年1月25日 [2024年2月20日].
- . [2019-12-07]. (原始内容存档于2019-05-02).
- . [2019-12-07]. (原始内容存档于2018-12-30).
- . [2019-12-07]. (原始内容存档于2019-12-02).
- . [2019-12-07]. (原始内容存档于2019-05-02).
- . [2019-12-07]. (原始内容存档于2019-09-02).
- . [2019-12-07]. (原始内容存档于2019-05-02).
- . [2019-12-07]. (原始内容存档于2019-05-02).
- . [2019-12-07]. (原始内容存档于2019-07-31).
- . [2019-12-07]. (原始内容存档于2019-05-02).
- . [2019-12-07]. (原始内容存档于2019-09-03).
- . [2019-12-07]. (原始内容存档于2018-01-20).
- . [2019-12-07]. (原始内容存档于2019-12-29).
- . [2019-12-07]. (原始内容存档于2019-11-25).
- . [2019-12-07]. (原始内容存档于2019-07-16).
- . [2019-12-07]. (原始内容存档于2019-05-02).
- . [2019-12-07]. (原始内容存档于2018-08-17).
- .
- .
- . [2019-12-07]. (原始内容存档于2020-08-25).
- . [2019-12-07]. (原始内容存档于2019-05-02).
- . [2019-12-07]. (原始内容存档于2019-11-21).
- . [2019-12-07]. (原始内容存档于2020-08-25).
- . [2019-12-07]. (原始内容存档于2019-05-08).
- . [2019-12-07]. (原始内容存档于2019-06-16).
- . pingcap.com. [2019-12-07]. (原始内容存档于2019-11-06).
- . pingcap.com. [2019-12-07]. (原始内容存档于2019-11-06).
- . pingcap.com. [2019-12-07]. (原始内容存档于2019-11-06).
- . pingcap.com. [2019-12-07]. (原始内容存档于2019-11-06).
- . pingcap.com. [2019-12-07]. (原始内容存档于2019-11-21).
- . pingcap.com. [2019-12-07]. (原始内容存档于2019-11-06).
- . pingcap.com. [2019-12-07]. (原始内容存档于2019-11-06).
- . pingcap.com. [2019-12-07]. (原始内容存档于2019-05-02).
- States, Austin TX United. . Datanami. 2018-02-22 [2019-12-07]. (原始内容存档于2019-11-06).
- . pingcap.com. [2019-12-07]. (原始内容存档于2019-11-06).