当前位置: 首页 > news >正文

数据仓库理论知识

1、数据仓库的概念
        

数据仓库(英文:Date Warehouse,简称数仓、DW),是一个用于数据存储、分析、报告的数据系统。数据仓库的建设目的是面向分析的集成化数据环境,其数据来源于不同的外部系统,其结果开放给不同外部应用使用,为企业提供决策支持;

2、数据仓库的主要特征

数据仓库是面向主题性(Subject-Oriented )、集成性(Integrated)、非易失性(Non-Volatile)和时变性(Time-Variant )数据集合,用以支持管理决策 。

3、数据库和数据仓库的区别:

  • 数据源:数据库的数据仅包含当前运行的日常业务数据,而数据仓库的数据是整合了多个外部系统的数据包括OLTP。
  • 目的:数据库的建设目的面向应用、面向业务、支持事务,而数据据仓库的建设是面向主题、面向分析、支持决策的
  • 焦点:数据库关注的数据焦点是当下,而数据仓库则是面向过去、面向历史、实时数仓。
  • 任务:数据库存在读写操作,而数据仓库是大量的读数据而很少有写操作。
  • 响应时间:数据库是毫秒级别,数据仓库库秒、分钟、小时或则天,主要取决于数据量和查询的复杂度。
  • 数据量:数据库小数据,MB、GB级别的,而数据仓库则是大数据TB、PB级别
  1. 数据仓库不是大型的数据库,虽然数据仓库存储数据规模大。
  2. 数据仓库的出现,并不是要取代数据库。
  3. 数据库是面向事务的设计,数据仓库是面向主题设计的。
  4. 数据库一般存储业务数据,数据仓库存储的一般是历史数据。
  5. 数据库是为捕获数据而设计,数据仓库是为分析数据而设计

4、数据仓库、数据集市

数据仓库是面对整个集团和组织的数据,而数据集是面向单个部门使用的,可以认为数据集市是数据仓库的子集。用户可以基于主题数据开展各种应用:数据分析、数据报表、数据挖掘。

5、数据仓库分层架构

详解-ODS-DWD-DWS-ADS

相关文章:

  • 北京网站建设多少钱?
  • 辽宁网页制作哪家好_网站建设
  • 高端品牌网站建设_汉中网站制作
  • 2024/9/9 408“回头看”:b树
  • Spark-ShuffleWriter
  • 风中摇曳的小萝卜(机器学习)笔记 EM算法
  • AutoIT:强大的RPA自动化脚本神器,安装到使用的保姆级教程!
  • Matlab程序练习
  • 4千6历年高考英语试题大全ACCESS\EXCEL数据库
  • strncpy陷阱
  • 运维问题0002:SAP多模块问题-SAP系统程序在执行时,跳出“加急快件”窗口,提示:快件文档“更新已终止”从作者***收到
  • SonicWall SSL VPN曝出高危漏洞,可能导致防火墙崩溃
  • 如何修复软件中的BUG
  • 第四章 类和对象 课后训练(1)
  • 数据看板多端查看无压力,教你轻松设置响应式布局
  • Dockerfile中的RUN、CMD、ENTRYPOINT指令区别
  • PCL-统计滤波
  • 十、组合模式
  • [译]Python中的类属性与实例属性的区别
  • 【108天】Java——《Head First Java》笔记(第1-4章)
  • 【挥舞JS】JS实现继承,封装一个extends方法
  • Android交互
  • angular学习第一篇-----环境搭建
  • css布局,左右固定中间自适应实现
  • java概述
  • Java应用性能调优
  • js 实现textarea输入字数提示
  • maya建模与骨骼动画快速实现人工鱼
  • Promise初体验
  • Python学习之路16-使用API
  • Quartz实现数据同步 | 从0开始构建SpringCloud微服务(3)
  • React-redux的原理以及使用
  • RxJS: 简单入门
  • unity如何实现一个固定宽度的orthagraphic相机
  • Vue2.x学习三:事件处理生命周期钩子
  • 电商搜索引擎的架构设计和性能优化
  • 基于Javascript, Springboot的管理系统报表查询页面代码设计
  • 快速体验 Sentinel 集群限流功能,只需简单几步
  • 你真的知道 == 和 equals 的区别吗?
  • 通过几道题目学习二叉搜索树
  • 小程序开发中的那些坑
  • 2017年360最后一道编程题
  • 东超科技获得千万级Pre-A轮融资,投资方为中科创星 ...
  • ​【已解决】npm install​卡主不动的情况
  • ​flutter 代码混淆
  • (顶刊)一个基于分类代理模型的超多目标优化算法
  • (十八)devops持续集成开发——使用docker安装部署jenkins流水线服务
  • (一)【Jmeter】JDK及Jmeter的安装部署及简单配置
  • (转)机器学习的数学基础(1)--Dirichlet分布
  • .dat文件写入byte类型数组_用Python从Abaqus导出txt、dat数据
  • .h头文件 .lib动态链接库文件 .dll 动态链接库
  • .NET CLR Hosting 简介
  • .net core 的缓存方案
  • .NET Core 实现 Redis 批量查询指定格式的Key
  • .net dataexcel 脚本公式 函数源码
  • .net FrameWork简介,数组,枚举
  • .NET 动态调用WebService + WSE + UsernameToken
  • .NET 中的轻量级线程安全