IT数码 购物 网址 头条 软件 日历 阅读 图书馆
TxT小说阅读器
↓语音阅读,小说下载,古典文学↓
图片批量下载器
↓批量下载图片,美女图库↓
图片自动播放器
↓图片自动播放器↓
一键清除垃圾
↓轻轻一点,清除系统垃圾↓
开发: C++知识库 Java知识库 JavaScript Python PHP知识库 人工智能 区块链 大数据 移动开发 嵌入式 开发工具 数据结构与算法 开发测试 游戏开发 网络协议 系统运维
教程: HTML教程 CSS教程 JavaScript教程 Go语言教程 JQuery教程 VUE教程 VUE3教程 Bootstrap教程 SQL数据库教程 C语言教程 C++教程 Java教程 Python教程 Python3教程 C#教程
数码: 电脑 笔记本 显卡 显示器 固态硬盘 硬盘 耳机 手机 iphone vivo oppo 小米 华为 单反 装机 图拉丁
 
   -> 大数据 -> 一、ShardingSphere基础 分库分表 -> 正文阅读

[大数据]一、ShardingSphere基础 分库分表

1、为何要分库分表?

? ? ? ? 常规在未进行分库分表的情况下,随着时间的推移,表中的数据量会越来越多,即表越来越大。

? ? ? ? 最终会导致:

  • ?一台服务器的资源不足
  • 库中的表越来越多,表中的数据量越来越大
  • 增删改查的开销越来越大

2、如何优化?

????????分库分表

3、垂直拆分、水平拆分

3.1、垂直拆分

????????垂直拆分数据库是指按照业务将表进行分类,部署到不同的数据库上面去,这样就能将数据(压力)分担到不同的数据库上面去。

例如:将商品、订单、用户的表分别拆到不同的库中,通过降低单库的大小来提高性能。但这种仍然存在大数据量带来的性能损耗。

? ? ? ? 垂直拆分表就是将一个大表根据业务功能拆分成多个子表。

例如:将用户表根据业务拆分成基本信息表和详细信息表。

? ? ? ? ?缺点:

? ? ? ? 1、不解决大数据量带来的性能损耗,读写压力还是很大。

? ? ? ? 2、不同的业务无法跨库关联(join),只能通过业务来关联。

3.2、水平拆分

? ? ? ? 水平拆分是按照表中的某个或者多个字段按照一定的规则来分散到多个库或者表中,每个表中包含一部分数据。

例如:按照时间或者id进行拆分。比如根据用户id来拆分到不同的数据库(或者表),每个数据库和表结构一致。

3.3、垂直拆分对比水分拆分?

垂直拆分

水平拆分

特点
  • 规则简单,实施方便

  • 业务之间的耦合度非常低,相互影响很小

  • 根据不同的表来进行拆分,对应用程序的影响也更小

  • 将同一个表中的不同数据拆分到不同的数据库

  • 对于应用程序来说,表的命名比垂直拆分复杂

  • 后期的数据维护也会复杂

优点
  • 系统之间整合或扩展容易

  • 拆分后业务清晰,拆分规则明确

  • 数据维护简单

  • 拆分规则抽象好,Join操作基本可以数据库做

  • 不存在单库大数据,高并发的性能瓶颈。

  • 应用端改造较少。

  • 提高了系统的稳定性跟负载能力。

缺点
  • 部分业务表无法Join,只能通过接口方式解决,提高了系统复杂度。

  • 受每种业务不同的限制存在单库性能瓶颈,不易数据扩展跟性能提高。

  • 事务处理复杂。

  • 拆分规则难以抽象。

  • 分片事务一致性难以解决。

  • 数据多次扩展难度跟维护量极大。

  • 跨库Join性能较差。

  大数据 最新文章
实现Kafka至少消费一次
亚马逊云科技:还在苦于ETL?Zero ETL的时代
初探MapReduce
【SpringBoot框架篇】32.基于注解+redis实现
Elasticsearch:如何减少 Elasticsearch 集
Go redis操作
Redis面试题
专题五 Redis高并发场景
基于GBase8s和Calcite的多数据源查询
Redis——底层数据结构原理
上一篇文章      下一篇文章      查看所有文章
加:2021-10-08 11:51:37  更:2021-10-08 11:53:21 
 
开发: C++知识库 Java知识库 JavaScript Python PHP知识库 人工智能 区块链 大数据 移动开发 嵌入式 开发工具 数据结构与算法 开发测试 游戏开发 网络协议 系统运维
教程: HTML教程 CSS教程 JavaScript教程 Go语言教程 JQuery教程 VUE教程 VUE3教程 Bootstrap教程 SQL数据库教程 C语言教程 C++教程 Java教程 Python教程 Python3教程 C#教程
数码: 电脑 笔记本 显卡 显示器 固态硬盘 硬盘 耳机 手机 iphone vivo oppo 小米 华为 单反 装机 图拉丁

360图书馆 购物 三丰科技 阅读网 日历 万年历 2024年11日历 -2024/11/24 0:48:01-

图片自动播放器
↓图片自动播放器↓
TxT小说阅读器
↓语音阅读,小说下载,古典文学↓
一键清除垃圾
↓轻轻一点,清除系统垃圾↓
图片批量下载器
↓批量下载图片,美女图库↓
  网站联系: qq:121756557 email:121756557@qq.com  IT数码