数仓建模-ER模型
数仓建模 ER模型 3NF -> 第三范式(Third Normal Form,3rd NF)就是指表中的所有数据元素不但要能唯一地被主关键字所标识,而且它们之间还
Read more
经常看到一些Hive优化的建议中说当小表与大表做关联时，把小表写在前面，这样可以使Hive的关联速度更快，提到的原因都是说因为小表可以先放到内存中，然后大表的每条记录再去内存中检测，最终完成关联查询。这样的原因看似合理，但是仔细推敲，又站不
2021-12-03
Hello World
Welcome to Hexo! This is your very first post. Check documentation for more info. If you get any problems when using Hex
2021-12-03
Lock wait timeout exceeded; try restarting transaction解决方案
Lock wait timeout exceeded; try restarting transaction解决方案1[2021-11-01 09:49:59] [40001][1205] Lock wait timeout exceede
2021-11-01
数据模型⽆法复⽤，归根结底还是设计问题
原文链接
数据模型⽆法复⽤，归根结底还是设计问题如果把指标⽐喻成⼀棵树上的果实，那模型就是这棵⼤树的躯⼲，想让果实结得好，必须让树⼲变得粗壮。真实场景举例：⼤多数公司的分析师会结合业务做⼀些数据分析（需要⽤到⼤量的数据），通过报表的⽅式服务
2021-09-23
定义事实表和维度表
定义事实表和维度表分为四个阶段：
1、选择业务流程
2、确定颗粒度
3、确定维度
4、识别事实
是不是看起来很简单呢？接下来，将使用以下步骤分解流程：
将详细的原子数据加载到维度结构中
围绕业务流程构建维度模型
确保每个事实表都有一个关联
2021-07-12
Hive窗口函数详解
一、hive窗口函数语法在前言中我们已经说了avg()、sum()、max()、min()是分析函数，而over()才是窗口函数，下面我们来看看over()窗口函数的语法结构、及常与over()一起使用的分析函数
1231、over()窗口
2021-06-30
HDFS简介
一、hive窗口函数语法在前言中我们已经说了avg()、sum()、max()、min()是分析函数，而over()才是窗口函数，下面我们来看看over()窗口函数的语法结构、及常与over()一起使用的分析函数
1231、over()窗口
2021-06-30
Hive 中parse_url的使用
1、Hive的parse_url函数parse_url(url, partToExtract[, key]) - extracts a part from a URL解析URL字符串，partToExtract的选项包含[HOST,PATH
2021-06-30
distribute by 和 partition by
开窗函数over（）开窗函数，其括号内部主要有两种形式，固定搭配，不能更改：over(distribute by…sort by…) 和 over(partition by…order by…)
两种开窗方式区别patition by是按照
2021-06-25
hive中order by,sort by,distribute by,cluster by作用和用法
hive中order by,sort by,distribute by,cluster by作用和用法转载
数据准备12345678910111213141516171819202122232425262728293031 -- zxz_
2021-06-22