美文网首页程序员MySQL
数据库水平垂直拆分

数据库水平垂直拆分

作者: 陈晓阳_矿洞程序员 | 来源:发表于2019-03-13 00:42 被阅读7次

数据库水平垂直拆分

当数据库量非常大的时候,DB 已经成为系统瓶颈时就可以考虑进行水平垂直拆分了。

水平拆分

一般水平拆分是根据表中的某一字段(通常是主键 ID )取模处理,将一张表的数据拆分到多个表中。这样每张表的表结构是相同的但是数据不同。

不但可以通过 ID 取模分表还可以通过时间分表,比如每月生成一张表。
按照范围分表也是可行的:一张表只存储 0~1000W的数据,超过只就进行分表,这样分表的优点是扩展灵活,但是存在热点数据。

按照取模分表拆分之后我们的查询、修改、删除也都是取模。比如新增一条数据的时候往往需要一张临时表来生成 ID,然后根据生成的 ID 取模计算出需要写入的是哪张表(也可以使用分布式 ID 生成器来生成 ID)。

分表之后不能避免的就是查询要比以前复杂,通常不建议 join ,一般的做法是做两次查询。

垂直拆分

当一张表的字段过多时则可以考虑垂直拆分。
通常是将一张表的字段才分为主表以及扩展表,使用频次较高的字段在一张表,其余的在一张表。

这里的多表查询也不建议使用 join ,依然建议使用两次查询。

拆分之后带来的问题

拆分之后由一张表变为了多张表,一个库变为了多个库。最突出的一个问题就是事务如何保证。

两段提交

最终一致性

如果业务对强一致性要求不是那么高那么最终一致性则是一种比较好的方案。

通常的做法就是补偿,比如 一个业务是 A 调用 B,两个执行成功才算最终成功,当 A 成功之后,B 执行失败如何来通知 A 呢。

比较常见的做法是 失败时 B 通过 MQ 将消息告诉 A,A 再来进行回滚。这种的前提是 A 的回滚操作得是幂等的,不然 B 重复发消息就会出现问题。 矿洞程序员.jpg

相关文章

  • 数据库拆分

    数据库拆分有垂直拆分和水平拆分两种 垂直拆分:把数据库中不同业务的数据拆分到不同的数据库中。 水平拆分:把同一个表...

  • 数据库水平垂直拆分

    数据库水平垂直拆分 当数据库量非常大的时候,DB 已经成为系统瓶颈时就可以考虑进行水平垂直拆分了。 水平拆分 一般...

  • 第36期:MySQL 原生水平拆表

    引言 上一章节我们探讨过数据垂直拆分,今天我们来继续讨论数据拆分:水平拆分! 水平拆分和垂直拆分有些不一样,垂直拆...

  • 水平拆分 垂直拆分

    1.水平拆分根据数据库表行进行拆分 一般来说一张表数据量达到200W,操作速度就会变慢,我们现在分成四个表插入时...

  • 数据库水平拆分和垂直拆分

    业务场景 我们都知道一个数据库的连接数是有上限的,当我们的业务系统变得繁杂时,如果都存储在一个数据库中,那么势必会...

  • 数据库的垂直拆分和水平拆分

    概念介绍 垂直拆分 垂直拆分就是要把表按模块划分到不同数据库表中(当然原则还是不破坏第三范式),这种拆分在大型网站...

  • 数据库的水平拆分和垂直拆分

    http://www.cnblogs.com/shijingxiang/articles/4601674.html...

  • item使用

    command + D 垂直拆分面板command + shift + D 水平拆分面板command + w 关...

  • 第35期:MySQL 数据垂直拆分

    引言 一般来说讲,提到数据拆分,可以归结为两个层面:一是垂直拆分,二是水平拆分。这里我们来讨论下垂直拆分。 垂直拆...

  • MySQL分库、分表的问题

    问题描述 为什么进行分表? 分库? 一般多少数据量开始分表? 什么是数据库垂直拆分和水平拆分 回答 为什么要进行分...

网友评论

    本文标题:数据库水平垂直拆分

    本文链接:https://www.haomeiwen.com/subject/qlsnpqtx.html