IT数码 购物 网址 头条 软件 日历 阅读 图书馆
TxT小说阅读器
↓语音阅读,小说下载,古典文学↓
图片批量下载器
↓批量下载图片,美女图库↓
图片自动播放器
↓图片自动播放器↓
一键清除垃圾
↓轻轻一点,清除系统垃圾↓
开发: C++知识库 Java知识库 JavaScript Python PHP知识库 人工智能 区块链 大数据 移动开发 嵌入式 开发工具 数据结构与算法 开发测试 游戏开发 网络协议 系统运维
教程: HTML教程 CSS教程 JavaScript教程 Go语言教程 JQuery教程 VUE教程 VUE3教程 Bootstrap教程 SQL数据库教程 C语言教程 C++教程 Java教程 Python教程 Python3教程 C#教程
数码: 电脑 笔记本 显卡 显示器 固态硬盘 硬盘 耳机 手机 iphone vivo oppo 小米 华为 单反 装机 图拉丁
 
   -> 大数据 -> FusionInsight概述 -> 正文阅读

[大数据]FusionInsight概述

01 引言

最近可能会用到华为的FusionInsight产品,所以预先了解下。

02 FusionInsight概述

FusionInsight官网地址https://e.huawei.com/cn/solutions/cloud-computing/big-data

2.1 数据湖

在了解FusionInsight之前,需要知道什么是数据湖。

数据湖是一个集中式存储库,允许以任意规模存储所有结构化和非结构化数据。可以按原样存储数据(无需先对数据进行结构化处理),并运行不同类型的分析 , 从控制面板和可视化到大数据处理、实时分析和机器学习,以指导做出更好的决策
在这里插入图片描述

数据仓库与数据湖的对比:

特性数据仓库数据湖
数据来自事务系统、运营数据库和业务线应用程序的关系数据来自 IoT 设备、网站、移动应用程序、社交媒体和企业应用程序的非关系和关系数据
Schema设计在数据仓库实施之前(写入型 Schema)写入在分析时(读取型 Schema)
性价比更快查询结果会带来较高存储成本更快查询结果只需较低存储成本
数据质量可作为重要事实依据的高度监管数据任何可以或无法进行监管的数据(例如原始数据)
用户业务分析师数据科学家、数据开发人员和业务分析师(使用监管数据)
分析批处理报告、BI 和可视化机器学习、预测分析、数据发现和分析

数据湖的价值能够在更短的时间内从更多来源利用更多数据,并使用户能够以不同方式协同处理和分析数据,从而做出更好、更快的决策

2.2 FusionInsight为何物?

在这里插入图片描述

总结FusionInsight本质是一个分布式数据处理系统,是在Hadoop集群上又封装了一层,类似于开源的CDHHDP等大数据平台

FusionInsight数据湖解决方案(下面是官网贴出来的):

  • 作用:政务数据治理和一网通办,金融实时风控,运营商BOM三域融合,大企业智慧园区、智慧城轨、智慧机场等。支撑政企客户全量数据的实时分析、离线分析、交互查询、实时检索、多模分析、数仓集市、数据接入治理、图计算等海量数据分析场景,加速释放数据价值,助力政企客户实现一企一湖、一城一湖!
  • 内容MRS云原生数据湖、DWS云数据仓库、 DGC数据湖治理中心、 GES图引擎等云服务。

2.3 FusionInsight架构

Fusion Insight有4个子产品和1个操作运维系统:

  • Fusion Insight HD(大数据处理环境):使用的数据库是Hive和HBase
  • Fusion Insight MPPDB(并行处理关系型数据库):没有明确使用什么数据库,SQL是PostgreSql-FDW提供的,数据存储使用的HDFS
  • Fusion Insight Miner(数据分析平台):基于Fusion Insight HD
  • Fusion Insight Farmer(应用容器)
  • Fusion Insight Manager(操作运维系统)

在这里插入图片描述

在这里插入图片描述

FusionInsight学习路线图,以下贴图来自:https://www.zhihu.com/question/33570348
在这里插入图片描述

03 文末

FusionInsight的介绍到此为止了,其实该产品也没有看出什么亮点,实际就是Hadoop的包装,文档又不给下载,无法更进一步的去介绍了,本文完!

  大数据 最新文章
实现Kafka至少消费一次
亚马逊云科技:还在苦于ETL?Zero ETL的时代
初探MapReduce
【SpringBoot框架篇】32.基于注解+redis实现
Elasticsearch:如何减少 Elasticsearch 集
Go redis操作
Redis面试题
专题五 Redis高并发场景
基于GBase8s和Calcite的多数据源查询
Redis——底层数据结构原理
上一篇文章      下一篇文章      查看所有文章
加:2022-06-06 17:25:11  更:2022-06-06 17:26:14 
 
开发: C++知识库 Java知识库 JavaScript Python PHP知识库 人工智能 区块链 大数据 移动开发 嵌入式 开发工具 数据结构与算法 开发测试 游戏开发 网络协议 系统运维
教程: HTML教程 CSS教程 JavaScript教程 Go语言教程 JQuery教程 VUE教程 VUE3教程 Bootstrap教程 SQL数据库教程 C语言教程 C++教程 Java教程 Python教程 Python3教程 C#教程
数码: 电脑 笔记本 显卡 显示器 固态硬盘 硬盘 耳机 手机 iphone vivo oppo 小米 华为 单反 装机 图拉丁

360图书馆 购物 三丰科技 阅读网 日历 万年历 2024年5日历 -2024/5/19 22:59:37-

图片自动播放器
↓图片自动播放器↓
TxT小说阅读器
↓语音阅读,小说下载,古典文学↓
一键清除垃圾
↓轻轻一点,清除系统垃圾↓
图片批量下载器
↓批量下载图片,美女图库↓
  网站联系: qq:121756557 email:121756557@qq.com  IT数码