IT数码 购物 网址 头条 软件 日历 阅读 图书馆
TxT小说阅读器
↓语音阅读,小说下载,古典文学↓
图片批量下载器
↓批量下载图片,美女图库↓
图片自动播放器
↓图片自动播放器↓
一键清除垃圾
↓轻轻一点,清除系统垃圾↓
开发: C++知识库 Java知识库 JavaScript Python PHP知识库 人工智能 区块链 大数据 移动开发 嵌入式 开发工具 数据结构与算法 开发测试 游戏开发 网络协议 系统运维
教程: HTML教程 CSS教程 JavaScript教程 Go语言教程 JQuery教程 VUE教程 VUE3教程 Bootstrap教程 SQL数据库教程 C语言教程 C++教程 Java教程 Python教程 Python3教程 C#教程
数码: 电脑 笔记本 显卡 显示器 固态硬盘 硬盘 耳机 手机 iphone vivo oppo 小米 华为 单反 装机 图拉丁
 
   -> 大数据 -> RK-08 并发控制 数据库故障 数据备份 分布式数据库 数据仓库 数据挖掘 商业智能 ?大数据? -> 正文阅读

[大数据]RK-08 并发控制 数据库故障 数据备份 分布式数据库 数据仓库 数据挖掘 商业智能 ?大数据?

目录

并发控制

数据库故障

数据备份

?分布式数据库

?数据仓库

?数据挖掘

?商业智能

?编辑大数据

?编辑


并发控制

事务:由一系列操作组成,要么全做,要么全不做

原子性:要么全做,要么全不做

一致性:事务发生后数据是一致的

隔离性:一个事务的更新操作过程对其他事务是不可见的

持续性:事务操作的结果是持续的

并发控制的三个问题

丢失更新、不可重复读、读脏数据

分别使用一二三级封锁协议可以解决

一级封锁协议先给事务加写锁(排他锁),事务结束才解锁

二级封锁协议在一级封锁协议的基础上增加了读锁(共享锁),读完后释放

三级封锁协议跟二级封锁协议相似,但是直到事务结束才释放

数据库故障

分为四种故障,其中事务内部故障是由于自生逻辑或算法溢出导致的,系统故障可能是由于操作系统故障、停电等导致的、介质故障一般是物理介质损坏?

数据备份

静态转储(冷备份)期间是不允许对数据库进行存取、修改操作的,转储速度快、方便,但是只能恢复到一个时间点

动态转储(热备份)期间允许进行存取、修改,可以和事务并发执行,可以进行表空间或数据库文件级备份,但是如果出错结果将全部无效

完全备份:备份全部数据

差量备份:备份上一次完全备份之后产生变化的数据

增量备份:备份上一次备份后产生变化的数据,不管上一次是不是完全备份

日志文件:事务处理过程中,DBMS把事务开始、结束以及对数据库的插入、修改、删除的操作计入日志文件,一旦发生故障,DBMS的修复子系统利用日志文件撤销事务对数据库的改变,回到事务初始阶段

?分布式数据库

将多个局部数据库放在不同位置,实验全局DBMS对全部数据库联网管理

水平分片就是按记录分片

垂直分片就是按列分片

分片透明性:用户不需要直到是怎么分片存储的

位置透明性:应用程序不关心数据存储物理位置的改变

逻辑透明性:用户或应用无需知道局部使用的是哪种数据模型

复制透明性:用户或应用程序不关心复制的数据从何而来

?数据仓库

目的:不用于增删改查、面向主题,用于大数据挖掘、数据分析等,集成不同表相对稳定反映历史的变化

?数据挖掘

四种分析方法:

关联分析:分析不同事件的关联性

序列分析:发现一定时间间隔内连续性发生的事件,这些事件构成一个序列

分类分析:通过分析具有类别的样本特点,得到决定样本属于各个类别的规划或方法,分类分析时首先为每一个记录赋予一个标记,即按标记分类记录,然后检查这些标定的记录,描述记录的特征

聚类分析:将本身没有类别的样本聚集成不同的组,并且对每个这样的组进行描述的过程

?商业智能

主要包括:数据预处理、建立数据仓库、数据分析、数据展现

前两步用于建立数据仓库

后两步用于数据分析

数据预处理包括:数据抽取、转换、加载

数据分析一般采用联机分析处理和数据挖掘两大技术

数据展现主要保证系统分析结果的可视化

?反规范化技术

主要手段包括:增加派生性冗余列、增加冗余列、重新组表、分割表

主要就是增加冗余,提高查询效率,为规范化查询的逆操作?

大数据

?特点:量大、多样性、价值密度低、快速化

数据量在PB级以上,需要深度分析、需要集群平台

集群平台特征:高度可扩展性、高性能、高容错、支持异构环境、分析延迟短、易用且开放的接口、成本低、向下兼容

?

  大数据 最新文章
实现Kafka至少消费一次
亚马逊云科技:还在苦于ETL?Zero ETL的时代
初探MapReduce
【SpringBoot框架篇】32.基于注解+redis实现
Elasticsearch:如何减少 Elasticsearch 集
Go redis操作
Redis面试题
专题五 Redis高并发场景
基于GBase8s和Calcite的多数据源查询
Redis——底层数据结构原理
上一篇文章      下一篇文章      查看所有文章
加:2022-10-17 12:41:07  更:2022-10-17 12:45:19 
 
开发: C++知识库 Java知识库 JavaScript Python PHP知识库 人工智能 区块链 大数据 移动开发 嵌入式 开发工具 数据结构与算法 开发测试 游戏开发 网络协议 系统运维
教程: HTML教程 CSS教程 JavaScript教程 Go语言教程 JQuery教程 VUE教程 VUE3教程 Bootstrap教程 SQL数据库教程 C语言教程 C++教程 Java教程 Python教程 Python3教程 C#教程
数码: 电脑 笔记本 显卡 显示器 固态硬盘 硬盘 耳机 手机 iphone vivo oppo 小米 华为 单反 装机 图拉丁

360图书馆 购物 三丰科技 阅读网 日历 万年历 2024年11日历 -2024/11/13 14:34:19-

图片自动播放器
↓图片自动播放器↓
TxT小说阅读器
↓语音阅读,小说下载,古典文学↓
一键清除垃圾
↓轻轻一点,清除系统垃圾↓
图片批量下载器
↓批量下载图片,美女图库↓
  网站联系: qq:121756557 email:121756557@qq.com  IT数码