Loading......

大数据组件

浏览该标签下的所有文章

全部 # 大模型工作流数仓 6 # 灵茶山艾府-基础算法精讲 8 # 实时项目 4 # 游戏分享 2 # 思绪随笔 1 # 音乐分享🎵 2 # Flink 时间语义&窗口 6 # Flink 算子 2 # DataStream API 2 # Flink基础 20 # 汽车天地 2 # AI Agent 6 # 数码产品 3 # 回忆录 4 # 人资数仓 9 # 刷题打卡 1 # 标签资产建设 8 # 核心指标大盘 6 # 面试问答 8 # 数据治理 8 # 数据倾斜 2 # 数据建模 2 # Doris 3 # 实习面经 15 # SQL 3 # Spark 7 # Hive 4 # 人物偶像 1 # Hadoop 6 # 日常record✍️ 17 # 吐吐槽🙃 3 # 电商数仓🧰 5 # 力扣Hot100🔥 8 # 意料之外🫨 2

🚀 大数据开发核心八股的封面

面试素材

大数据组件

🚀 大数据开发核心八股

文章梳理大数据核心知识体系：涵盖 HDFS 架构与读写、HA及小文件治理；MapReduce 原理与 Shuffle；Yarn 调度与架构；Spark 组件、RDD/DAG、Stage/Shuffle、调优排错与数据倾斜、Join 策略；Doris 架构与存储；数仓分层建模；Hive 架构与优化。

21

0

0

⭐ MySQL 的封面

数开知识点

大数据组件

⭐ MySQL

本文总结 MySQL 表设计要点：数值/字符串/时间类型选型原则（金额用 DECIMAL、时间用 DATETIME、字段尽量小）；索引类型与 B+Tree/哈希特性、联合索引最左前缀与前缀索引；utf8mb4 与排序规则推荐；三范式与反范式、命名字段规范、分库分表与生产禁忌，并给出订单系统建表示例。

13

0

0

🚀 Kafka 架构与核心机制详解的封面

数开知识点

大数据组件

🚀 Kafka 架构与核心机制详解

概述Kafka架构组件与ZK职责，给出集群机器/磁盘/分区估算公式，介绍副本、ISR与acks可靠性，压测瓶颈与参数调优，含监控、清理策略及顺序性要点。

23

0

0

🌀 Flume 核心原理与组件详解的封面

数开知识点

大数据组件

🌀 Flume 核心原理与组件详解

本文介绍 Flume 日志采集架构：Source/Channel/Sink 三组件与 Put/Take 事务保障“至少一次”传输。重点解析 TaildirSource 断点续传与重复处理，比较 File/Memory/Kafka Channel 选型，说明 HDFS Sink 滚动写入、拦截器与通道选择器，并给出监控与性能优化建议。

17

0

0