Hive SQL底层执行过程详细剖析
Hive是什么？Hive 是数据仓库工具，再具体点就是一个 SQL 解析引擎，因为它即不负责存储数据，也不负责计算数据，只负责解析 SQL，记录元数据。 Hive直接访问存储在 HDFS 中或者 HBase 中的文件...
PostgreSQL基础（十）：PostgreSQL的并发问题
PostgreSQL的并发问题 一、事务的隔离级别 在不考虑隔离性的前提下，事务的并发可能会出现的问题： 脏读： 不可重复读： 幻读： 针对这些并发问题，关系型数据库有一些事务的隔离级别，一般用4...
数据中台能力成熟度模型
来源：中国信通院 49828 2023年1月4日，为进一步赋能数据要素价值释放，加强数据资产行业交流合作，由中国信息通信研究院、中国通信标准化协会指导，中国通信标准化协会大数据技术标准推进委员...
数据中台整体规划与建设方案
免责声明：本号所载内容为原创或整理于互联网公开资料，版权归原作者所有。文章仅供读者学习交流，不作任何商业用途。因部分内容无法确认真正来源，如有标错来源或涉及作品版权问题烦请告知，将...
一文学完所有的Hive SQL（两万字最全详解）
一文学完所有的Hive SQL（两万字最全详解） ================================================== 进入主页，点击右上角“设为星标” 比别人更快接收好文章 Hive SQL 大全 本文基本涵盖了Hive日...
ChatGPT：1小时学会DAMA数据管理（上篇）
满足企业及其利益相关方的信息需求 确保数据的质量、完整性和安全性 保护数据隐私和机密性 防止数据被未经授权或不当访问和使用 确保数据能有效服务于企业增值目标 将数据视为独特属性的资产 重...
MySQL数据库基础（六）：DDL数据库操作
DDL数据库操作 一、MySQL的组成结构 注： 一个MySQL DBMS可以同时存放多个数据库，理论上一个项目就对应一个数据库。如博客项目blog数据库、商城项目shop数据库、微信项目wechat数据库。 一个数...
Spark的两种核心Shuffle详解
由于 Shuffle 涉及磁盘的读写和网络 I/O，因此 Shuffle 性能的高低直接影响整个程序的性能 Spark Shuffle Spark Shuffle 分为两种：一种是基于 Hash 的 Shuffle；另一种是基于 Sort 的 Shuffle...
关于数仓建设及数据治理的超全概括
本文分为两大节介绍，第一节是数仓建设，第二节是数据治理，内容较长，还请耐心阅读！ 在谈数仓之前，先来看下面几个问题： 数仓为什么要分层？ 用空间换时间，通过大量的预处理来提升应用系统...
实时数仓新选择——Doris构建实时数仓落地方案详解（文末送Doris书籍）
本文主要介绍Doris在构建实时数据仓库应用上的具体落地方案。主要包括以下三方面内容： 1. 实时数据仓库概述 2. Doris核心功能解读 3. Doris实时数仓设计 Duplicate Key模型也叫可重复模型、明...
