ChatGPT、Claude的数据分析能力已经到了何种水平？
ChatGPT 4o现在也具备了该能力，但距离Claude 3.5有差距，比如针对案例一，其识别出的数据明显不准确，200602的离网用户数被识别为了52000，但肉眼可见的数据应该在70000以上。 针对案例二，把...
IT管理者的自白：技术让我坐上了会议桌，但业务语言让我在桌前有发言权
正文开始 技术语言侧重细节和过程 业务语言强调结果和价值 技术语言多用专业术语 业务语言倾向通用词汇 技术语言解释'如何做' 业务语言阐明'为什么做'和'带来什么好处' '我们用了React前端框架,...
Kafka在美团数据平台的实践(好文收藏)
1. 现状和挑战 1.1 现状 Kafka是一个开源的流处理平台，业界有很多互联网企业也都在使用这款产品。我们首先了解一下Kafka在美团数据平台的现状。 如图1-1所示，蓝色部分描述了Kafka在数据平台定...
大数据架构、高性能、数据治理面试题及答案
A. 大数据的高级处理技术（占比5%） 单选题： 1. 以下__不属于大数据的关键技术 A. 数据技术 B. 大数据安全技术和大数据质量技术 C. 虚拟化技术和云计算平台技术 D. 海量数据的存储技术 答案...
Spark底层执行原理详细解析
Spark简介 大规模数据处理高容错性高可伸缩性 Spark源码从1.x的40w行发展到现在的超过100w行，有1400多位大牛贡献了代码。整个Spark框架源码是一个巨大的工程。下面我们一起来看下spark的底层执...
Spark知识体系五万字讲解，学习与面试收藏这篇就够了！
一、Spark 基础二、Spark Core三、Spark SQL四、Spark Streaming五、Structured Streaming六、Spark 两种核心 Shuffle七、Spark 底层执行原理八、Spark 数据倾斜九、Spark 性能调优十、Spark 故...
数仓指标体系搭建实战
正文 曹雷 | 作者 滴滴技术 | 来源 指标体系 1. 痛点分析 业务、技术、产品 业务视角 业务分析场景指标、维度不明确； 频繁的需求变更和反复迭代，数据报表臃肿，数据参差不齐； 用户分析具体...
基于Flink建设实时数仓
正文开始： 本文目录： 一. 实时计算初期 二. 实时数仓建设 三. Lambda架构的实时数仓 四. Kappa架构的实时数仓 五. 流批结合的实时数仓 实时计算初期 虽然实时计算在...
实时数仓分层架构超全解决方案
ODS：Operation Data Store，也称为贴源层。数据仓库源头系统的数据表通常会原封不动的存储一份，这称为ODS层，是后续数据仓库加工数据的来源。 DW数据分层，由下到上一般分为DWD，DWB，DWS。 D...
