Hadoop/Spark 之重 轻量级的选择 SPL 集群计算的代码也非常简单，比如前面提到的订单分析计算，具体要求是：大订单表分段存储在 4 个节点上，小产品表则加载到每个节点的内存中，两表关联之后要...

正文开始 导读 本次分享将聚焦于资产体系中的全链路血缘，文章将围绕下面四点展开：本次分享将聚焦于资产体系中的全链路血缘，文章将围绕下面四点展开： 1. 抖音集团血缘整体介绍 2. 抖音集团...

子查询（三步走） 一、子查询（嵌套查询）的介绍 在一个 select 语句中,嵌入了另外一个 select 语句, 那么被嵌入的 select 语句称之为子查询语句，外部那个select语句则称为主查询。 主查询和子...

PostgreSQL的安装与配置 一、PostgreSQL的安装 咱们只在Linux中安装，不推荐大家在Windows下安装。 Linux的版本尽量使用7.x版本，最好是7.6或者是7.8版本。 去官网找按照的方式 选择好PGSQL的版...

spark sql 2.4 新增了高阶函数功能，允许在数组类型中像 scala/python 一样使用高阶函数 背景 复杂类型的数据和真实数据模型相像，但是使用sql操作较为困难，一般需要借助于 explod/collect_lis...

1粉丝：我们团队习惯了做业务数据的质量监控，有成熟的完整性、一致性、准确性校验方法。但现在接触音频、图像数据，以前的经验好像都用不上。这种非结构化数据，质量到底该怎么评估和提升？ 说...

E-R模型及表间关系 一、E-R模型的使用场景 对于大型公司开发项目，我们需要根据产品经理的设计，先使用建模工具, 如：power designer，db desinger等这些软件来画出实体-关系模型(E-R模型) 然后...

说明:本文部分文字与图片资源来自于网络，分享此文是出于传递更多信息之目的,若有来源标注错误或侵犯了您的合法权益，请立即后台留言通知我们，情况属实，我们会第一时间予以删除，并同时向您表...

表的基本操作（二） 一、视图 跟MySQL的没啥区别，把一些复杂的操作封装起来，还可以隐藏一些敏感数据。 视图对于用户来说，就是一张真实的表，可以直接基于视图查询一张或者多张表的信息。 视...