【果总谈BI】数据归IT，分析归业务
企业知识开源首席布道师陈果的答案是：数据归IT，分析归业务。即IT部门主要负责管理好数据、提供好工具，分析本质上是业务要做的事情。 为何会有这样的结论？陈果在「敏捷·创变——2024观远数...
一文讲透数据仓库命名规范
正文开始 引言 在当今数据驱动的商业环境中,数据仓库已成为企业决策的核心支撑。然而,随着数据量的急剧增长和数据复杂性的提高,如何有效管理和使用这些数据成为了一个巨大的挑战。其中,一个经常...
一文读懂AI黑话：31个最流行的大模型术语（图解珍藏版）
一、时代基石 构成整个大语言模型时代的根基，是理解一切的前提。 1. 生成式AI (Generative AI) 2. Transformer架构 (Transformer Architecture) 3. 基础模型 (Foundation Models) 4. 预训练与...
一文读懂Hive底层数据存储格式（好文收藏）
性能也能得到数量级的提升 Hive 数据存储常用的格式如下： 行式存储 文本格式（TextFile） 二进制序列化文件 （SequenceFile） 列式存储 行列式文件（RCFile） 优化的行列式文件（ORCFile） Apa...
万字详解数据仓库、数据湖、数据中台和湖仓一体
本文目录： 一、前言 数字化转型浪潮卷起各种新老概念满天飞，数据湖、数据仓库、数据中台轮番在朋友圈刷屏，有人说“数据中台算个啥，数据湖才是趋势”，有人说“再见了数据湖、数据仓库，数据...
万字详解整个数据仓库建设体系（好文收藏）
本文目录： 二、数仓建模方法 三、维度建模 四、实际业务中数仓分层 数据仓库的基本概念 数据仓库概念: 英文名称为Data Warehouse，可简写为DW或DWH。数据仓库的目的是构建面向分析的集成化数据...
万字长文详解HiveSQL执行计划
本文目录：一、前言二、SQL的执行计划 一、前言 可以说执行计划是打开SQL优化大门的一把钥匙 要想学SQL执行计划，就需要学习查看执行计划的命令：explain，在查询语句的SQL前面加上关键字explai...
两万字详解性能优化的十种手段（好文收藏）
引言：取与舍 软件设计开发某种意义上是“取”与“舍”的艺术。 关于性能方面，就像建筑设计成抗震9度需要额外的成本一样，高性能软件系统也意味着更高的实现成本，有时候与其他质量属性甚至会...
两个优秀的分布式消息流平台：Kafka与Pulsar剖析
本文向读者介绍两个优秀的分布式消息流平台：Kafka与Pulsar。Kafka与Pulsar。 Apache Kafka（简称Kafka） Apache Pulsar（简称Pulsar） 基础功能： （1）消息系统： 优点： 系统解耦：生产者与...
数据中台能力成熟度模型
来源：中国信通院 49828 2023年1月4日，为进一步赋能数据要素价值释放，加强数据资产行业交流合作，由中国信息通信研究院、中国通信标准化协会指导，中国通信标准化协会大数据技术标准推进委员...
