1、数据源层 (Data Sources Layer) 2、开发层 (Development Layer) 3、控制层 (Control Layer) 4、执行层 (Execution Layer) 5、存储层 (Storage Layer) 三、全面ETL平台对比分析 1、开源平台评...

正文开始 本文将全面解读数据质量管理平台的架构、数据质量管理平台评价标准、17个主流数据质量管理平台对比分析及企业适配选型的建议。 一、数据质量管理平台的架构 接入适配层规则引擎层问题...

PostgreSQL基本操作和数据类型介绍 一、单引号和双引号 在PGSQL中，写SQL语句时，单引号用来标识实际的值。双引号用来标识一个关键字，比如表名，字段名。 二、数据类型转换 第一种方式：只需要...

“十万字段，没有一个注释，交接时你崩溃过吗？” 相信我，你不是一个人在战斗。写数据字典，这活儿又累又不讨好，但偏偏重要到不行。 上个月我们团队接手一个“祖传”数据库，15 张核心表，上...

正文开始 导读 1. 项目背景和目标 2. 解决方案 3. 产品效果 4. 落地挑战 5. 总结和展望 6. 问答环节 分享嘉宾｜刘行行 中国平安人寿保险股份有限公司 财企及产品数据服务组分组经理 编辑...

  文章字数：13271字 预计阅读需：18分钟 有需要可 点赞+在看 关注公众号《大数据阶梯之路》找小编获取文档保存本地吧，学习和复习都是绝佳，公众号不断分享技术相关文章 一、问题背景 主要从...

子查询（三步走） 一、子查询（嵌套查询）的介绍 在一个 select 语句中,嵌入了另外一个 select 语句, 那么被嵌入的 select 语句称之为子查询语句，外部那个select语句则称为主查询。 主查询和子...

Flink状态原理及异常容错机制 在1.2.3节，笔者强调了Flink是一个高可用的有状态计算引擎，在第5章的案例中，也频繁出现了状态这个概念。那么状态是什么呢？有状态计算又是什么呢？Flink基于状态...

1. Hive 1.1 without shuffle Hive在通过SQL写文件是通过MapReduce任务完成的，如下面这个例子： 在表中插入数据后，可以hdfs对应路径下找到存储的文件 可以看到插入生成了1个文件，这是因为每...

正文开始： 一、什么是数据指标体系？ 数据：数据是指对客观事件进行记录并可以鉴别的符号，是对客观事物的性质、状态以及相互关系等进行记载的物理符号或这些物理符号的组合。它是可识别的、抽...