影响关系型数据库分片的关键因素是什么？

作者｜Ozgun Erdogan

译者｜薛命灯

来自 Citus 的 Ozgun Erdogan 分享了进行数据库分片的三个关键属性，并强调  应用类型 是决定数据库分片最主要的因素。其中 B2B 类型的应用最容易进行数据库分片。

在数据库很小的时候，可以很容易地通过 添加硬件 来扩展数据库。但随着数据表数量的不断增长，我们需要寻找其他的方式来伸缩数据库。

分片是伸缩数据库最好的方式之一。通过分片将数据库拆分成更小的单元，可以线性地扩展数据库的 CPU、内存和磁盘资源。

不过在分片这个问题上也存在一些争议，网络上充斥着各种有关分片的不同观点，如“essential to scaling your database infrastructure”和“why you never want to shard”。

那么问题来了，我们应该采纳哪一种观点？一般来说，答案会以“它取决于……”开始。

分片的原理很简单，就是通过一个键（或者说列）来均匀地分布数据。不过理论虽简单，但在真正遇到要对数据库进行分片时，很可能会陷入手忙脚乱之中。

在 Citus，我们曾经帮助数百个团队进行数据库分片，也从中总结了一些关键的分片模式。

在这篇文章里，我们会先探讨一些决定分片成败的关键属性，然后从底层细节分析这些属性之间的不同点。在进行大型数据库分片时，应用程序的类型将成为最主要的影响因素。

成功分片取决于三个关键属性   

我们发现有三个关键属性会影响到分片的成功。下图通过三个方向轴展示了这三个属性，并在每个轴上面放置了一些知名的公司作为例子。

X 轴表示 负载类型，从左侧的事务开始延伸到右侧的数据仓库。在进行数据库伸缩时，这一维度最具有识别度。

Z 轴表示另一个非常重要的属性，也就是应用程序当前所处的 生命周期。此时你的数据库里有多少数据表？你的应用程序已经运行了多长时间？一个运行了几个月的数据库要比运行了数年的数据库更容易进行分片。

在 Citus，我们发现大部分用户都有自己的应用程序。应用程序越是成熟，Y 轴就显得越为重要。不过这个维度不如其他两个维度那么具有识别度。

事实上，很多讨论分片的文章之所以会得出互相矛盾的结论，是因为它们只是基于单一的应用类型。

分片中最重要的属性：应用类型（B2B 或 B2C）   

Y 轴展示了在对成熟数据库进行分片时最为重要的属性：应用程序的类型。在这条轴上，B2B 应用处于最上端，它们的数据模型更容易进行分片。

B2C 应用处于轴的底部，比如 Amazon 和 Facebook，它们的分片需要做更多的工作。

接下来，我们挑选了三家知名的公司来比对它们之间的不同点。

B2B 类型：Salesforce   

CRM 系统是 B2B 应用最为典型的例子。构建 CRM 系统的目的是为了要给其他客户提供服务的，我们假设 GE Aviation 是你的一个客户，他们正在使用 Salesforce。

GE Aviation 有如下的一些实体：

• 客户（customer）：公司的顾客。

• 用户（user）：用户可以登录 GE 公司的仪表盘。

• 负责人（lead）：GE 与这些负责人商谈业务。

• 联系人（contact）：GE 与这些联系人有了业务往来，并知道他们的联系方式。

• 账号（account）：业务代表和拥有联系人的人。

• 机会（opportunity）：与账号和联系人相关的销售事件。

如果把这些实体之间的复杂关系映射到数据库里，看起来是这样的：

整个图乍一看确实很复杂，不过如果你多花一点时间看仔细一点，你会发现大多数表都是源自 customer 表。通过往每个表里添加 customer_id 列可以把表间关系转换成如下形式：

通过这种简单的转换，就可以通过 customer_id 这个键进行数据库分片。这个键可以让数据均匀地分布，而大部分查询都需要带上这个键。

另外，你还可以根据 customer_id 把相关表聚集在同一个位置，这样就可以继续使用关系型数据库的一些关键特性，比如事务、表连接和外键。

换句话说，如果你的应用类型是 B2B 的，那么你的数据就具备了 分片的天然特性。

B2C 类型：Amazon   

Amazon 是 B2C 应用最为典型的例子。在构建像 Amazon 这样的网站时，有许多东西需要考虑。

首先，用户来到你的网站，浏览你的商品，比如书或电子产品。假设用户在浏览《Harry Potter 7》，他们也可以看到这个产品的分类信息，比如书本的作者、价格、封面和其他图片。

用户在登录网站之后，开始访问用户相关的数据。用户需要得到认证，然后获得给产品添加评论的权限或者把产品添加到购物车里的权限。

在某个时候，用户决定要购买购物车里的产品，于是就下单。订单经过处理之后，开始进入物流运送流程。

你会发现，现在的关系图与 Salesforce 的关系图有一个很大的不同点。现在的关系图中不止一个中心点，而是三个：分类（catalog）、用户（user）和订单（order）。

要对这种 B2C 类型的数据进行分片，可以考虑将它们 重构成微服务。例如，与产品目录相关的服务提供目录服务，用户相关的服务提供认证和购物车服务。服务之间的 API 定义了底层数据访问的边界。

数据经过拆分之后，就可以进行分片。事实上，Amazon 在迁移到面向服务架构时就使用了类似的方式进行数据分片。

这种分片方式与 B2B 应用的分片在好处和成本比率上有很大的差别。从好处方面来看，你可以依赖数据库从不同的数据库连接数据，或者为数据集提供事务和约束。从成本方面来看，现在要进行分片的不止是一个数据集，而是多个。

B2C2C 类型：Instacart   

在B2B和B2C之间还有另外一种类型的网站，比如 Postmates、Instacart 或 Lyft。Instacart 的主营业务是将本地商店的货物运送给用户。从某方面来看，Instacart 与 Amazon 有点类似。

Instacart 的数据模型具有三个维度：提供货物的本地商店、订购商品的用户和运送货物的司机。所以，很难在这当中挑出一个键进行分片。

如果你的应用属于 B2C2C 类型，可能需要采取不同的策略。你会发现大部分数据表会共享一个维度：地理位置信息。在这种情况下，你可能会选择城市或地理位置作为分片的键。

一般来说，B2B2C 应用或 B2C2C 应用的分片处于图谱的中间。B2B2C 分片的好处和成本之间的比率要高于 B2C 应用，但低于 B2B 应用。

结论   

网络上存在很多有关分片的观点。我们发现它们大部分都是基于单一的应用类型。事实上，应用类型比其他因素更能影响到分片。B2B 类型的应用最容易进行分片。

阅读英文原文：

https://www.citusdata.com/blog/2017/08/09/principles-of-sharding-for-relational-databases/

今日荐文

点击下方图片即可阅读

                                         

 告诉你一个搜索服务优化方案：基于 RDF 的知识图谱管理

---

更多关于精彩技术专题请关注 QCon 全球软件开发大会，QCon 上海站目前 8 折优惠报名中，2017 年 09 月 17 日前，立减 680 元，团购报名更多优惠～点击「 阅读原文 」跟技术大咖零距离。欲购票或咨询问题可联系购票经理 Hanna ，电话／微信：15110019061。

---