[大数据]基于Linux环境下MySQL数据库的建立

前言

数据库基本概念

数据组成

数据（DATA）

1. 描述事物的符号记录
2. 包括数字，文字，图像，档案记录等
3. 以"记录"形式按统一的格式进行存储

表

1. 将不同的记录组织在一起
2. 用来存储具体数据

数据库

1. 表的集合，是存储数据的仓库
2. 以一定的组织方式存储的相互有关的数据集合

实现功能的规则：SQL语句（进行增删改查）

数据库类型

关系型数据库（SQL）

存储的往往是字符字符串、数值、布尔值等（磁盘）

数据库的英文单词：DataBase 简称 ： DB。用于存储和管理数据的仓库，本质上是一个文件系统，还是以文件的方式存在服务器的电脑上的。
关系型数据库系统（RDBMS）是指使用了关系模型的数据库系统关系模型中，数据是分类存放的，数据之间可以有联系

数据库的特点：

1、持久化存储数据的，其实数据库就是一个文件系统
2、方便存储和管理数据
3、使用了统一的方式操作数据库 – SQL
?4、所有的关系型数据库都可以使用通用的 SQL 语句进行管理 DBMS DataBase Management System。

非关系型数据库（NoSQL）

存储的往往是图片、视屏、语音等（内存）

优点：

1. 简单的扩展：典型例子是 Cassandra，由于其架构是类似于经典的 P2P，所以能通过轻松地添加新的节点来扩展这个集群 ;
2. 快速的读写：主要例子有 Redis，由于其逻辑简单，而且纯内存操作，使得其性能非常出色，单节点每秒可以处理超过 10万次读写操作 ;
3. 低廉的成本：这是大多数分布式数据库共有的特点，因为主要都是开源软件，没有昂贵的 License成本 ;

缺点：

1. 不提供对 SQL的支持：如果不支持 SQL这样的工业标准，将会对用户产生一定的学习和应用迁移成本 ;
2. 支持的特性不够丰富：现有产品所提供的功能都比较有限，大多数 NoSQL数据库都不支持事务，也不像 MS SQL Server和 Oracle那样能提供各种附加功能，比如 BI和报表等 ;
3. 现有产品的不够成熟：大多数产品都还处于初创期，和关系型数据库几十年的完善不可同日而语 ;

** 拓展：**

现在主流的 NoSQL数据库有 BigTable、 HBase、 Cassandra、 SimpleDB、 CouchDB、 MongoDB和 Redis等。

Redis是NoSql数据库的典型代表，兼具临时性和永久性存储功能，且集合了临时性key-value存储和永久性key-value存储的优点。Redis首先把数据保存到内存中，在满足特定条件（默认是15分钟一次以上，5分钟内10个以上，1分钟内10000个以上的key发生变更）的时候将数据写入到硬盘中。这样既确保了内存中数据的处理速度，又可以通过写入硬盘来保证数据的永久性。这种类型的数据库特别适合于处理数组类型的数据。

同时在内存和硬盘上保存数据。

可以进行非常快速的保存和读取处理。

保存在硬盘上的数据不会消失，可以恢复。

适合于处理数组类型的数据。

时序型数据库（TSDB）

心电图，持续性，根据时间点进行变化的一组连续性的数据（时序数据）

MySQL数据库

概述

1. Oracle旗下的产品
2. 遵守GPL协议，可以免费使用与修改

优点：

1. 性能卓越、服务稳定
2. 开源、无版权限制、成本低
3. 多线程、多用户
4. 基于C/S（客户端/服务器）架构
5. 安全可靠

日志

1. 数据库口志文件用于各份，恢复，是最核心的部分
2. mysql与oracle日志有所区别
3. mysql写一条数据，同步到日志中一条
4. oracle：重做日志组
5. 一个组中至少3个日志成员，轮流存储日志
6. 还会有另一个组与之同步/备份

安装数据库

添加安装编译工具

yum -y iinstall gcc gcc-c++ ncurese ncurese-devel bison cmake

创建程序用户管理

useradd -s /sbin/nologin mysql

解压缩包

tar zxvf mysql-5.7.17.tar.gz -C /opt
tar axvf boost_1_59_0.tar.gz -C /usr/local

移动包 并cd到绝对路径下

mv /usr/local/boost_1_59_0/ /usr/local/boost
cd /opt/mysql-5.7.17/

Cmake\

-DCMAKE_INSTALL_PREFIX=/usr/local/mysql \        #指定mysql的安装路径
-DMYSQL_UNIX_ADDR=/usr/local/mysql/mysql.sock \ #指定mysql进程监听套接字文件（数据库连接文件）的存储路径
-DSYSCONFDIR=/etc \                             #指定配置文件的存储路径
-DSYSTEMD_PID_DIR=/usr/local/mysql \            #指定进程文件的存储路径
-DDEFAULT_CHARSET=utf8  \                       #指定默认使用的字符集编码，如 utf8
-DDEFAULT_COLLATION=utf8_general_ci \            #指定默认使用的字符集校对规则
-DWITH_EXTRA_CHARSETS=all \                        #指定支持其他字符集编码
-DWITH_INNOBASE_STORAGE_ENGINE=1 \              #安装INNOBASE存储引擎
-DWITH_ARCHIVE_STORAGE_ENGINE=1 \               #安装ARCHIVE存储引擎 
-DWITH_BLACKHOLE_STORAGE_ENGINE=1 \             #安装BLACKHOLE存储引擎 
-DWITH_PERFSCHEMA_STORAGE_ENGINE=1 \            #安装FEDERATED存储引擎 
-DMYSQL_DATADIR=/usr/local/mysql/data \         #指定数据库文件的存储路径
-DWITH_BOOST=/usr/local/boost \          #指定boost的路径，若使用mysql-boost集成包安装则-DWITH_BOOST=boost
-DWITH_SYSTEMD=1                                #生成便于systemctl管理的文件

存储引擎选项:
MYISAM，MERGE，MEMORY和cSv引擎是默认编译到服务器中，并不需要明确地安装。静态编译一个存储引擎到服务器，使用-DWITH engine STORAGE ENGINE= 1
可用的存储引擎值有:ARCHIVE，BLACKHOLE，EXAMPLE，FBDERATBD，IMNOBASB(InnoDB)，PARTTTON(partitioning support),和PERFSCHEMA(Performance schema)

 make && make install
注意：如果在CMAKE的过程中有报错，当报错解决后，需要把源码目录中的CMakeCache.txt文件删除，然后再重新CMAKE，否则错误依旧

make -j 3 && make install

更改属住和属组

chown -R mysql:mysql /usr/local/mysql

修改配置文件

[client]                                    #客户端设置
port = 3306
socket=/usr/local/mysql/mysql.sock            

[mysqld]                                    #服务全局设置
user = mysql                                   #设置管理用户
basedir=/usr/local/mysql                    #指定数据库的安装目录
datadir=/usr/local/mysql/data                #指定数据库文件的存储路径
port = 3306                                    #指定端口
character-set-server=utf8                    #设置服务器字符集编码格式为utf8
pid-file = /usr/local/mysql/mysqld.pid        #指定pid 进程文件路径
socket=/usr/local/mysql/mysql.sock            #指定数据库连接文件
bind-address = 0.0.0.0                        #设置监听地址，0.0.0.0代表允许所有，如允许多个IP需空格隔开
skip-name-resolve                            #禁用DNS解析
max_connections=2048                        #设置mysql的最大连接数
default-storage-engine=INNODB                #指定默认存储引擎
max_allowed_packet=16M                        #设置数据库接收的数据包大小的最大值
server-id = 1                                #指定服务ID号

#设置环境变量，申明/宣告mysql命令便于系统识别

echo "PATH=$PATH:/usr/local/mysql/bin" >> /etc/profile
source /etc/profile

为什么需要给mysql数据库初始化

初始化数据库是控制哪个部分，目的是什么，为什么要做这个

1. 是对mysql服务站的库、表进行初始化（用户登陆权限的数据、服务基础表、基础库的数据、引导文件）
2. 初始化对象是mysql内部
3. 目的是让mysql可以正常的对外提供服务，至少登录到mysql服务环境内部时，用户权限数据、引导文件数据基础组成的库，表数据是完整的
4. 简单来说 初始化，是mysql能够正常提供服务的必要的操作
5. 让mysql能正常运行和提供功能

建立mysql的密码

mysqladmin -uroot -p password "123456"


systemctl daemon-reload         #刷新识别     

systemctl start mysqld.service  #开启服务

systemctl enable mysqld         #开机自启动

netstat -anpt | grep 3306       #查看端口

登陆数据库

mysql -u(用户名) -p(密码)
-u和用户名直接可以有空格，但是密码不可以