Kafka在美团数据平台的实践(好文收藏)
1. 现状和挑战 1.1 现状 Kafka是一个开源的流处理平台，业界有很多互联网企业也都在使用这款产品。我们首先了解一下Kafka在美团数据平台的现状。 如图1-1所示，蓝色部分描述了Kafka在数据平台定...
HBase分布式数据库入门介绍
一、简单介绍 HBase是一个高可靠性、高性能、面向列、可伸缩、实时读写的分布式 NOSQL 数据库。 当你需要随机、实时读/写访问大数据时，请使用 Apache HBase。 作用 名称解释： NameSpace Regio...
PostgreSQL基础（八）：表的基本操作（二）
表的基本操作（二） 一、视图 跟MySQL的没啥区别，把一些复杂的操作封装起来，还可以隐藏一些敏感数据。 视图对于用户来说，就是一张真实的表，可以直接基于视图查询一张或者多张表的信息。 视...
两万字详解性能优化的十种手段（好文收藏）
引言：取与舍 软件设计开发某种意义上是“取”与“舍”的艺术。 关于性能方面，就像建筑设计成抗震9度需要额外的成本一样，高性能软件系统也意味着更高的实现成本，有时候与其他质量属性甚至会...
数据中台解决方案（限时分享）
一、前言 1.1 本PPT的核心理念 1.2 本PPT的核心架构：1.2 本PPT的核心架构 一套企业架构: 一套数据治理体系： 建设路线规划： 1.3 本PPT的核心原则 坚持“业务牵引，咨询、平台、实施三位一体推...
长文详解HiveSQL执行计划
长文详解HiveSQL执行计划 ================================================== 本文目录：一、前言二、SQL的执行计划 一、前言 可以说执行计划是打开SQL优化大门的一把钥匙 要想学SQL执行计划...
6个月vs6年，为什么有人一直停在取数岗？
正文开始 注：本故事基于多人的实际经历改编而成。 序：一条深夜的微信 2023年12月的最后一个工作日，凌晨两点，我收到了老王的微信：'老师，晋升结果出来了，我又没过...' 消息框上方显示着他...
MySQL数据库基础（四）：图形化开发工具DataGrip
图形化开发工具DataGrip 一、DataGrip介绍 DataGrip是JetBrains公司推出的管理数据库的产品，功能非常强大，可以兼容各种数据库，另外,JetBrains公司还有一款知名的IDE开发工具IDEA，用户体验非...
Spark底层执行原理详细解析
Spark简介 大规模数据处理高容错性高可伸缩性 Spark源码从1.x的40w行发展到现在的超过100w行，有1400多位大牛贡献了代码。整个Spark框架源码是一个巨大的工程。下面我们一起来看下spark的底层执...
