数据中台到底是什么？
文末获取资料 数据中台到底是什么？几年过去了，也一直众说纷纭。 1、大数据平台 1、大数据平台1、大数据平台 2、数据资产管理平台 2、数据资产管理平台 业务元数据： 技术元数据： 管理元数...
小米基于Spark3.1搭建数据开发平台实践
1. Multiple Catalog 落地与应用 2. Hive SQL 迁移 Spark SQL 3. 离线场景下 Spark 的稳定性与性能优化 4. 未来规划 5. 问答环节 01 2.Spark3的元数据管理 Hive SQL迁移 Spark SQL 2.语法...
如何保障数仓数据质量？
导读 文｜傅宇康 有赞数据报表中心为商家提供了丰富的数据指标，包括30+页面，100+数据报表以及400+不同类型的数据指标，它们帮助商家更合理、科学地运营店铺，同时也直接提供分析决策方法供商...
大数据架构、高性能、数据治理面试题及答案
A. 大数据的高级处理技术（占比5%） 单选题： 1. 以下__不属于大数据的关键技术 A. 数据技术 B. 大数据安全技术和大数据质量技术 C. 虚拟化技术和云计算平台技术 D. 海量数据的存储技术 答案...
大数据数仓优质书籍清单推荐
哈喽，我是Akin，从事大数据数仓工作几年了，在工作和学习过程也看了一些数据仓库方面的优质书籍，此处整理了对自己帮助较大的部分，给大家推荐一下，希望能帮助到大家。个人推荐 尤其是第二本...
大数据OLAP引擎底层原理
由Facebook开源的Presto是其中的佼佼者，它是以MPP为架构的OLAP引擎中的中流砥柱。如果你学习过Spark、Flink的源码，会惊喜地发现，其中的多个设计思路和实现都参考了Presto，甚至于2019年在北...
大数据NiFi（二十）：实时同步MySQL数据到Hive
实时同步MySQL数据到Hive 案例：将mysql中新增的数据实时同步到Hive中。 以上案例需要用到的处理器有：“CaptureChangeMySQL”、“RouteOnAttribute”、“EvaluateJsonPath”、“ReplaceText”...
基于大模型进行数据分类分级实操指南
正文开始 当前，数据安全与合规性的重要性愈发凸显。如何根据数据的敏感程度进行分级，并配套相应的安全管控措施，是所有数据从业者必须面临且亟需解决的重要课题。 大模型能够理解和生成自然语...
华为数字化转型_从战略到执行（文末附PPT下载）
数字化转型势在必行，这已成为所有企业CIO的共识。但在现实中，很多数字化转型计划还是陷入重重困难，其原因大多在于企业内部对数字化转型的认知还不够透彻。尤其是对于那些业务正处于发展和上...
