数据结构与算法

【读书笔记】《 Hadoop构建数据仓库实践》第1章

02-《 Hadoop构建数据仓库实践》.jpg 第1章 数据仓库简介 1.1 什么是数据仓库 Inmon将数据仓库描述为一个面向主题的、集成的、随时间变化的、非易失的数据集合,用于支持管理者的决策过程。 1.3 数据仓库架构 1.3.2 主要数据仓库架构 在数据仓库技术演化过程中,产生了几种主要的架构方法,包括数据集市架构、Inmon企业信息工厂架构、Kimball数据仓库架构和混合

【总结】Data Vault数据建模过程及举例

数据仓库2.png 1. 摘要 本文介绍数据仓库中Data Vault建模的过程描述,并举一个示例以加深对相关概念的理解。 2. 内容 2.1 关于Data Vault数据模型 Data Vault(DV)模型用于企业级的数据仓库建模,是Dan Linstedt在20世纪90年代提出的。在最近几年,Data Vault模型获得了很多关注。 Data Vault是一种数据仓库建模方法,用

MySql用户管理

一、权限语法格式: 添加权限: grant 权限列表 on 库名 to 用户名@"客户端地址" identified by “密码”; 用户名:客户端连接数据库服务使用的用户 密码 :密码大于等于8个字符并包涵数字大小写字母符号 查看权限: show grants for 用户名@"客户端地址"; 修改密码: set password for 用户名@"客户端地址"=password("

MySQL查询慢,除了索引,还有什么原因?

一、先了解一下MySQL查询的执行过程 MySQL在查询时,它是由很多子任务组成的,每个子任务都会消耗一定的时间,如果要想优化查询,实际上要优化其子任务,可以消除一些子任务、减少子任务的执行次数、让子任务执行的更快。 MySQL查询的执行过程:从客户端到服务器、然后在服务器进行解析、生成执行计划、执行、返回结果给客户端。 执行是最重要的阶段,包括调用存储引擎检索数据、调用后的数据处理、排序、分组等

工作日常2

2022-07-20 研报抽取接口中新增了以下操作逻辑: 机构组织的统计选举操作 组织机构实体与金融指标实体相关联的操作 金融指标变化内容的遍历赋值操作 金融指标有无具体数值的判断操作 在生成节点与边的过程中,将构建逻辑优化为:首先检查节点是否存在,如果不存在则生成该节点并将边的尾节点id赋值为当前节点id;否则到节点字典中寻找当前节点的id并赋值给边的尾节点id。最后检查边是否重复,如果不

事务版本控制

问题由来 近段时间我们项目需要实现一个事务版本控制的列式数据库,下面来讲一讲我们的设计: 开启事务时候进行一个事务说明 例如 1.开启事务 POST { "explainValue(操作解释)": "I want update some Info")(必要) } 2.关闭事务 POST 记录

MySql数据库·建表三范式

一、建表时,表里建几个表头,表头叫什么名字,一般通过“ER关系模型” 来创建 (根据存储实体来创建) ER关系模型.png 二、表创建的合理性,可以使用“建表范式”来进行衡量,一般分为3个等级: 1NF:表头下的数据不能再拆分 2NF:一张表里只存储一种数据信息 ,不能用一张存储多种数据息 并且要有主键 3NF:表中表头的数据,不能依赖其他表头的数据(例如:年龄、总金额、总成绩

MyBatis源码第一天

一、MyBatis解析全局配置文件 1.MyBatis介绍 MyBatis是一个持久层的ORM框架,使用简单,学习成本较低。可以执行自己手写的SQL语句,比较灵活。但是MyBatis的自动化程度不高,移植性也不高,有时从一个数据库迁移到另外一个数据库的时候需要自己修改配置,所以称只为半自动ORM框架。 2.传统JDBC和Mybatis相比的弊病 2.1传统JDC 传统JDBC的问题如

MySql数据库·字段高级约束

一、高级约束分为: 主键 (primary key) 表头值不允许重复,且不允许赋NULL值 表中只能有一个主键表头 通常把表中唯一标识记录的表头设置为主键[记录编号表头] 自增长(auto_increment) 插入记录时,如果不给表头赋值表头通过自加1的计算结果赋值 要想让表头有自增长 表头必须有主键设置才可以 自增长总是根据最后1条件记录表头的值+1结果赋值,除非通过truncate