01 数据分类分级提出的背景 数据的价值 1.数据爆炸时代，数据量呈指数级增长 我们要如何看待数据这个话题。数据大爆炸已经成为了一个趋势，随着数字化转型的步伐逐步加快，数据的诞生不断加快。...

本文将总结下数据中台的相关理论知识。Flink平台化需要改进的点等等。 参考：《数据中台》 数据中台 数据汇聚 数据汇聚是数据中台必须提供的核心工具，把各种异构网络、异构数据源的数据方便地...

Linux系统下的MySQL安装与使用 一、MySQL部署安装 1. 卸载自带的MySQL8 2. 删除自带配置文件 3. 下载MySQL源 4. 安装MySQL源 5. 使用yum安装MySQL 注： 执行完之后再执行安装 启动MySQL 6. 获取...

最近和几位数据团队负责人聊天，发现一个挺普遍的情况： 大家都在说 “数据开发难”，可真问起难在哪儿，说法却不一样。 这些吐槽背后，其实是对数据开发的理解偏了： 很多人觉得数据开发就是 ...

DML数据操作语言 一、DML包括哪些SQL语句 insert插入、update更新、delete删除 二、数据的增删改（重点） 增加：insert 删除：delete 修改：update 1、数据的增加操作 基本语法： 特别注意：在S...

注：本文节选自清华大学出版社出版的《Hadoop海量数据处理：技术原理与项目实践》，略有改动，以纸质书出版为准。 --文末赠书-- 解析Yarn基本架构 资源调度器Yarn，主要由Resource Manager（RM...

致大数据工程师：站在数据洪流中的思考者与造物主 亲爱的同行者： 当你们在深夜的办公室里凝视着屏幕上跳动的数据流，当你们在凌晨三点的服务器警报声中调试着分布式计算节点，当你们在数据孤岛...

监控日志文件生产到Kafka 案例：监控某个目录下的文件内容，将消息生产到Kafka中。 此案例使用到“TailFile”和“PublishKafka_1_0”处理器。 一、配置“TailFile”处理器 创建“TailFile”处理...

'我们终于把数据孤岛打通了！集团所有系统的数据全接进来了，一万多张表！' 前阵子，一家传统制造企业的朋友打电话给我，声音里透着那种项目验收后的亢奋。 我心里咯噔一下，但还是问：'牛啊！...