数仓建模-ER模型
数仓建模 ER模型 3NF -> 第三范式(Third Normal Form,3rd NF)就是指表中的所有数据元素不但要能唯一地被主关键字所标识,而且它们之间还
阅读更多
switch 游戏介绍
游戏列表 侵权删除
图片
游戏名称
终极街头霸王 2：最后的挑战者 / Ultra Street Fighter II: The Final Challengers
魔神少女音乐外传 / Dar
2022-10-14
【转载】MapReduce之数据倾斜原因与解决
1 前言在大数据背景下, 数据倾斜是一个频发问题, 有时候我们可能会有疑问, 为什么一个处理几千万数据量的任务比一个处理几亿数据量的任务耗时还要长很多, 这里大概率是因为任务产生了数据倾斜. 在日常工作中, 数仓工程师一般可以比较好的处理倾
2022-01-07
经常看到一些Hive优化的建议中说当小表与大表做关联时，把小表写在前面，这样可以使Hive的关联速度更快，提到的原因都是说因为小表可以先放到内存中，然后大表的每条记录再去内存中检测，最终完成关联查询。这样的原因看似合理，但是仔细推敲，又站不
2021-11-26
Hello World
Welcome to Hexo! This is your very first post. Check documentation for more info. If you get any problems when using Hex
2021-11-26
Lock wait timeout exceeded; try restarting transaction解决方案
Lock wait timeout exceeded; try restarting transaction解决方案1[2021-11-01 09:49:59] [40001][1205] Lock wait timeout exceede
2021-11-01
数据模型⽆法复⽤，归根结底还是设计问题
原文链接
数据模型⽆法复⽤，归根结底还是设计问题如果把指标⽐喻成⼀棵树上的果实，那模型就是这棵⼤树的躯⼲，想让果实结得好，必须让树⼲变得粗壮。真实场景举例：⼤多数公司的分析师会结合业务做⼀些数据分析（需要⽤到⼤量的数据），通过报表的⽅式服务
2021-09-23
定义事实表和维度表
定义事实表和维度表分为四个阶段：
1、选择业务流程
2、确定颗粒度
3、确定维度
4、识别事实
是不是看起来很简单呢？接下来，将使用以下步骤分解流程：
将详细的原子数据加载到维度结构中
围绕业务流程构建维度模型
确保每个事实表都有一个关联
2021-07-12
Hive窗口函数详解
一、hive窗口函数语法在前言中我们已经说了avg()、sum()、max()、min()是分析函数，而over()才是窗口函数，下面我们来看看over()窗口函数的语法结构、及常与over()一起使用的分析函数
1231、over()窗口
2021-06-30
HDFS简介
一、hive窗口函数语法在前言中我们已经说了avg()、sum()、max()、min()是分析函数，而over()才是窗口函数，下面我们来看看over()窗口函数的语法结构、及常与over()一起使用的分析函数
1231、over()窗口
2021-06-30
Hive 中parse_url的使用
1、Hive的parse_url函数parse_url(url, partToExtract[, key]) - extracts a part from a URL解析URL字符串，partToExtract的选项包含[HOST,PATH
2021-06-30