IT数码 购物 网址 头条 软件 日历 阅读 图书馆
TxT小说阅读器
↓语音阅读,小说下载,古典文学↓
图片批量下载器
↓批量下载图片,美女图库↓
图片自动播放器
↓图片自动播放器↓
一键清除垃圾
↓轻轻一点,清除系统垃圾↓
开发: C++知识库 Java知识库 JavaScript Python PHP知识库 人工智能 区块链 大数据 移动开发 嵌入式 开发工具 数据结构与算法 开发测试 游戏开发 网络协议 系统运维
教程: HTML教程 CSS教程 JavaScript教程 Go语言教程 JQuery教程 VUE教程 VUE3教程 Bootstrap教程 SQL数据库教程 C语言教程 C++教程 Java教程 Python教程 Python3教程 C#教程
数码: 电脑 笔记本 显卡 显示器 固态硬盘 硬盘 耳机 手机 iphone vivo oppo 小米 华为 单反 装机 图拉丁
 
   -> 大数据 -> MySQL-1-数据库概述 -> 正文阅读

[大数据]MySQL-1-数据库概述

数据库概述

1. 使用数据库的原因

  1. ? 持久化(persistence):把数据保存到可掉电式存储设备中以供之后使用。大多数情况下,特别是企 业级应用,数据持久化意味着将内存中的数据保存到硬盘上加以”固化”,而持久化的实现过程大多 通过各种关系数据库来完成。
  2. 持久化的主要作用是将内存中的数据存储在关系型数据库中,当然也可以存储在磁盘文件、XML数 据文件中。

2.? 数据库的相关概念

? ? ?DB:数据库(Database)

即存储数据的“仓库”,其本质是一个文件系统。它保存了一系列有组织的数据。

? ? ?DBMS:数据库管理系统(Database Management System)

是一种操纵和管理数据库的大型软件,用于建立、使用和维护数据库,对数据库进行统一管理和控 制。用户通过数据库管理系统访问数据库中表内的数据。

? ? ?SQL:结构化查询语言(Structured Query Language)

专门用来与数据库通信的语言。

3.? 数据库与数据库管理系统的关系

? ? ? ?数据库管理系统(DBMS)可以管理多个数据库,一般开发人员会针对每一个应用创建一个数据库。为保存 应用中实体的数据,一般会在数据库创建多个表,以保存程序中实体用户的数据。

? ? 数据库管理系统、数据库和表的关系如图所示:

?4. 常见的数据库管理系统

? ? ?目前互联网上常见的数据库管理软件有Oracle、MySQL、MS SQL Server、DB2、PostgreSQL、Access、 Sybase、Informix这几种。可查询网页:https://db-engines.com/en/ranking

5. 常见的数据库介绍

?Oracle

1979 年,Oracle 2 诞生,它是第一个商用的 RDBMS(关系型数据库管理系统)。随着 Oracle 软件的名气 越来越大,公司也改名叫 Oracle 公司。

2007年,总计85亿美金收购BEA Systems。

2009年,总计74亿美金收购SUN。

此前的2008年,SUN以10亿美金收购MySQL。意味着Oracle 同时拥有了 MySQL 的管理权,至此 Oracle 在数据库领域中成为绝对的领导者。

2013年,甲骨文超越IBM,成为继Microsoft后全球第二大软件公司。 如今 Oracle 的年收入达到了 400 亿美金,足以证明商用(收费)数据库软件的价值。

SQL Server

SQL Server 是微软开发的大型商业数据库,诞生于 1989 年。C#、.net等语言常使用,与WinNT完全集 成,也可以很好地与Microsoft BackOffice产品集成。

DB2

IBM公司的数据库产品,收费的。常应用在银行系统中。

PostgreSQL

PostgreSQL 的稳定性极强,最符合SQL标准,开放源码,具备商业级DBMS质量。PG对数据量大的文本以 及SQL处理较快。

SyBase

已经淡出历史舞台。提供了一个非常专业数据建模的工具PowerDesigner。

SQLite

嵌入式的小型数据库,应用在手机端。 零配置,SQlite3不用安装,不用配置,不用启动,关闭或者配置 数据库实例。当系统崩溃后不用做任何恢复操作,再下次使用数据库的时候自动恢复。

informix

IBM公司出品,取自Information 和Unix的结合,它是第一个被移植到Linux上的商业数据库产品。仅运行 于unix/linux平台,命令行操作。 性能较高,支持集群,适应于安全性要求极高的系统,尤其是银行,证 券系统的应用。

6. MySQL介绍

6.1 概述

? ? <1> MySQL是一个 开放源代码的关系型数据库管理系统 ,由瑞典MySQL AB(创始人Michael Widenius)公 司1995年开发,迅速成为开源数据库的 No.1。

? ? ?<2> 2008被 Sun 收购(10亿美金),2009年Sun被 Oracle 收购。 MariaDB 应运而生。(MySQL 的创 造者担心 MySQL 有闭源的风险,因此创建了 MySQL 的分支项目 MariaDB)

? ? ?<3> MySQL6.x 版本之后分为 社区版 和 商业版 。

? ? ?<4>MySQL是一种关联数据库管理系统,将数据保存在不同的表中,而不是将所有数据放在一个大仓库 内,这样就增加了速度并提高了灵活性。

? ? ?<5>MySQL是开源的,所以你不需要支付额外的费用。

? ? ?<6> MySQL是可以定制的,采用了 GPL(GNU General Public License) 协议,你可以修改源码来 开发自己的MySQL系统。

? ? ? <7>MySQL支持大型的数据库。可以处理拥有上千万条记录的大型数据库。

? ? ? <8>MySQL支持大型数据库,支持5000万条记录的数据仓库,32位系统表文件最大可支持 4GB ,64位系 统支持最大的表文件为 8TB 。

? ? ? ?<9> MySQL使用 标准的SQL数据语言 形式。

? ? ? <10> MySQL可以允许运行于多个系统上,并且支持多种语言。这些编程语言包括C、C++、Python、 Java、Perl、PHP和Ruby等。

6.2?MySQL发展史重大事件

? ? ?<1>MySQL的历史就是整个互联网的发展史。互联网业务从社交领域、电商领域到金融领域的发展,推动着 应用对数据库的需求提升,对传统的数据库服务能力提出了挑战。

? ? ?<2>高并发、高性能、高可用、轻资源、 易维护、易扩展的需求,促进了MySQL的长足发展;

?

?6.3 关于Mysql 8.0

? ?<1>MySQL从5.7版本直接跳跃发布了8.0版本

? ?<2>MySQL 8版本在功能上 做了显著的改进与增强,开发者对MySQL的源代码进行了重构,最突出的一点是多MySQL Optimizer优化 器进行了改进。

选用MySQL的原因主要有以下几点:

? ? ?1. 开放源代码,使用成本低。

? ? ?2. 性能卓越,服务稳定。

? ? ?3. 软件体积小,使用简单,并且易于维护。

? ? ?4. 历史悠久,社区用户非常活跃,遇到问题可以寻求帮助。

? ? ?5. 许多互联网公司在用,经过了时间的验证。

Oracle 更适合大型跨国企业的使用,因为他们对费用不敏感,但是对性能要求以及安全性有更高的要 求。

MySQL 由于其体积小、速度快、总体拥有成本低,可处理上千万条记录的大型数据库,尤其是开放源码 这一特点,使得很多互联网公司、中小型网站选择了MySQL作为网站数据库(Facebook,Twitter, YouTube,阿里巴巴/蚂蚁金服,腾讯等)。

7. RDBMS 与 非RDBMS

? ? ?关系型数据库是 DBMS 的主流,其中使用最多的 DBMS 分别是 Oracle、 MySQL 和 SQL Server。

7.1 实质

? ?<1> 关系型数据库是最古老 的数据库类型,关系型数据库模型是把复杂的数据结构归结为简单的 二元关系 (即二维表格形式)。

? ?<2> 关系型数据库以 行(row) 和 列(column) 的形式存储数据,以便于用户理解。这一系列的行和列被 称为 表(table) ,一组表组成了一个库(database)。

? ?<3> 表与表之间的数据记录有关系(relationship)。现实世界中的各种实体以及实体之间的各种联系均用 关系模型 来表示。关系型数据库,就是建立在 关系模型 基础上的数据库。

? ? <4> SQL 就是关系型数据库的查询语言。

7.2?优势

? ? ? 复杂查询

? ? ? 可以用SQL语句方便的在一个表以及多个表之间做非常复杂的数据查询。

? ? ?事务支持

? ? ? 使得对于安全性能很高的数据访问要求得以实现。

7.3 非关系型数据库(非RDBMS)

? <1>非关系型数据库,可看成传统关系型数据库的功能 阉割版本 ,基于键值对存储数据,不需要经过SQL层 的解析, 性能非常高 。同时,通过减少不常用的功能,进一步提高性能。

? <2>目前基本上大部分主流的非关系型数据库都是免费的。

? <3>相比于 SQL,NoSQL 泛指非关系型数据库,包括了键值型数据库、文档型数据库、搜索引擎和 列存储等,除此以外还包括图形数据库。也只有用 NoSQL 一词才能将这些技术囊括进来。

? ?1.?键值型数据库

键值型数据库通过 Key-Value 键值的方式来存储数据,其中 Key 和 Value 可以是简单的对象,也可以是复 杂的对象。

Key 作为唯一的标识符,优点是查找速度快,在这方面明显优于关系型数据库,缺点是无法 像关系型数据库一样使用条件过滤(比如 WHERE),如果你不知道去哪里找数据,就要遍历所有的键, 这就会消耗大量的计算。

键值型数据库典型的使用场景是作为 内存缓存 。

2. Redis 是最流行的键值型数据库

文档型数据库

此类数据库可存放并获取文档,可以是XML、JSON等格式。在数据库中文档作为处理信息的基本单位, 一个文档就相当于一条记录。

文档数据库所存放的文档,就相当于键值数据库所存放的“值”。

MongoDB 是最流行的文档型数据库。此外,还有CouchDB等。

3. 搜索引擎数据库

虽然关系型数据库采用了索引提升检索效率,但是针对全文索引效率却较低。

搜索引擎数据库是应用在 搜索引擎领域的数据存储形式,由于搜索引擎会爬取大量的数据,并以特定的格式进行存储,这样在检 索的时候才能保证性能最优。

核心原理是“倒排索引”。

典型产品:Solr、Elasticsearch、Splunk 等。

4. 列式数据库?

列式数据库是相对于行式存储的数据库,Oracle、MySQL、SQL Server 等数据库都是采用的行式存储 (Row-based),而列式数据库是将数据按照列存储到数据库中,这样做的好处是可以大量降低系统的 I/O,适合于分布式文件系统,不足在于功能相对有限。

典型产品:HBase等。

5.?图形数据库

图形数据库,利用了图这种数据结构存储了实体(对象)之间的关系。

图形数据库最典型的例子就是社 交网络中人与人的关系,数据模型主要是以节点和边(关系)来实现,特点在于能高效地解决复杂的关 系问题。

图形数据库顾名思义,就是一种存储图形关系的数据库。它利用了图这种数据结构存储了实体(对象) 之间的关系。

关系型数据用于存储明确关系的数据,但对于复杂关系的数据存储却有些力不从心。如社 交网络中人物之间的关系,如果用关系型数据库则非常复杂,用图形数据库将非常简单。

典型产品: Neo4J、InfoGrid等。

7.4?NoSQL的演变

SQL 一直称霸 DBMS,因此许多人在思考是否有一种数据库技术能远离 SQL,于是 NoSQL 诞生了, 但是随着发展却发现越来越离不开 SQL。到目前为止 NoSQL 阵营中的 DBMS 都会有实现类似 SQL 的功 能。

? ? 1970:NoSQL = We have no SQL

? ? 1980:NoSQL = Know SQL

? ? ?2000:NoSQL = No SQL!

? ? ?2005:NoSQL = Not only SQL

? ? ?2013:NoSQL = No, SQL!

NoSQL 对 SQL 做出了很好的补充,比如实际开发中,有很多业务需求,其实并不需要完整的关系型数据 库功能,非关系型数据库的功能就足够使用了。这种情况下,使用 性能更高 、 成本更低 的非关系型数据 库当然是更明智的选择。比如:日志收集、排行榜、定时器等。

8 .?关系型数据库设计规则

<1>关系型数据库的典型数据结构就是 数据表 ,这些数据表的组成都是结构化的(Structured)。

<2>将数据放到表中,表再放到库中。

<3>一个数据库中可以有多个表,每个表都有一个名字,用来标识自己。表名具有唯一性。

<4>表具有一些特性,这些特性定义了数据在表中如何存储,类似Java和Python中 “类”的设计。

8.1?表、记录、字段

E-R(entity-relationship,实体-联系)模型中有三个主要概念是: 实体集 、 属性 、 联系集 。

一个实体集(class)对应于数据库中的一个表(table),

一个实体(instance)则对应于数据库表 中的一行(row),也称为一条记录(record)。

一个属性(attribute)对应于数据库表中的一列 (column),也称为一个字段(field)。

ORM思想 (Object Relational Mapping):

数据库中的一个表 Java或Python中的一个类

表中的一条数据 类中的一个对象(或实体)

表中的一个列 类中的一个字段、属性(field) ?

8.2 表的关联关系

表与表之间的数据记录有关系(relationship)。现实世界中的各种实体以及实体之间的各种联系均用 关系模型来表示。 四种:一对一关联、一对多关联、多对多关联、自我引用

<1>一对一关联

? ?1.在实际的开发中应用不多,因为一对一可以创建成一张表。

? ?2.两种建表原则:

外键唯一:主表的主键和从表的外键(唯一),形成主外键关系,外键唯一。

外键是主键:主表的主键和从表的主键,形成主外键关系。

<2>一对多关联

一对多建表原则:在从表(多方)创建一个字段,字段作为外键指向主表(一方)的主键

<3>多对多关联

?要表示多对多关系,必须创建第三个表,该表通常称为 联接表 ,它将多对多关系划分为两个一对多关 系。将这两个表的主键都插入到第三个表中。

<4>自我引用(Self reference)

  大数据 最新文章
实现Kafka至少消费一次
亚马逊云科技:还在苦于ETL?Zero ETL的时代
初探MapReduce
【SpringBoot框架篇】32.基于注解+redis实现
Elasticsearch:如何减少 Elasticsearch 集
Go redis操作
Redis面试题
专题五 Redis高并发场景
基于GBase8s和Calcite的多数据源查询
Redis——底层数据结构原理
上一篇文章      下一篇文章      查看所有文章
加:2022-01-24 10:57:59  更:2022-01-24 10:59:45 
 
开发: C++知识库 Java知识库 JavaScript Python PHP知识库 人工智能 区块链 大数据 移动开发 嵌入式 开发工具 数据结构与算法 开发测试 游戏开发 网络协议 系统运维
教程: HTML教程 CSS教程 JavaScript教程 Go语言教程 JQuery教程 VUE教程 VUE3教程 Bootstrap教程 SQL数据库教程 C语言教程 C++教程 Java教程 Python教程 Python3教程 C#教程
数码: 电脑 笔记本 显卡 显示器 固态硬盘 硬盘 耳机 手机 iphone vivo oppo 小米 华为 单反 装机 图拉丁

360图书馆 购物 三丰科技 阅读网 日历 万年历 2024年10日历 -2024/10/22 12:24:50-

图片自动播放器
↓图片自动播放器↓
TxT小说阅读器
↓语音阅读,小说下载,古典文学↓
一键清除垃圾
↓轻轻一点,清除系统垃圾↓
图片批量下载器
↓批量下载图片,美女图库↓
  网站联系: qq:121756557 email:121756557@qq.com  IT数码