subtitle
  文章分类
interview 15 interview spark 3 interview flink 1 数据分析 1 大数据 7 算法 2 SQL 3 数仓 2 操作系统 1 hive 2 etl spark hdfs 1 hive解析json 1 git 1 hdfs 1 Hadoop 1 Hadoop shell 1 yarn 1 数据库范式 1 spark 4 ER模型 1 模型设计 2 模型实施 1 体系架构 2 数据建模 1 数仓建设 2 事实表 1 distribute by 和 partition by 1 parse_url 4 clickhouse 2 css 2 data-analysis 2 database 2 bigData 5 js-basics 5 数据仓库建模方法论 1 Flink 2 front-end 2 Markdown 1 blog 2 presto 1 life 2 machine-learning 3 为什么要模型建立 1 模型实践 2 operation 1 Python 3 python 1 Spark 2 分享 1 Hbase 1 spark性能优化 1 帝都 1
Flink sql 最佳实践 Flink sql 最佳实践
【最佳实践】实时计算Flink在在线教育行业的实时数仓建设实践 https://developer.aliyun.com/article/769798?spm=a2c6h.14164896.0.0.73501154kejd15 【最佳实践
2020-08-24 bigData
flink
数据问题集锦 数据问题集锦
概述记录任何数据问题 问题 🤡 hive sqoop 使用sqoop hive数据导出到MySQL时遇到以下问题 123FATAL [IPC Server handler 17 on 16362] org.apache.hado
2020-01-01 bigData
hive spark sqoop HDFS CDH linux
superset搭建与使用 superset搭建与使用
[TOC] superset概要Apache Superset (incubating) is a modern, enterprise-ready business intelligence web application 1. 安装Py
2019-06-30 bigData
superset
Hadoop 中块大小的设置 Hadoop 中块大小的设置
https://www.cnblogs.com/Dhouse/p/6901028.html 小文件BLOCK占用【小于块大小的小文件不会占用整个HDFS块空间。也就是说，较多的小文件会占用更多的NAMENODE的内存（记录了文件的位置等信息
2018-11-22 bigData
handoop
Hadoop的入门 Hadoop的入门
概述Hadoop自推出以后在互联网快速发展的背景下得到了许多公司的认可，已然成为大数据的基础处理平台甚至是行业标准。Facebook，Amazon，Yahoo等等公司都在自己的系统中构建了基于Hadoop的处理平台。除了最基本的数据处理功能
2018-01-22 bigData
handoop