今天阳光很暖
03
22
【YARN 权威指南】13. YARN 常用命令 【YARN 权威指南】13. YARN 常用命令
YARN 命令行是 Web UI 的重要补充,也是日常排查里更稳定的入口。Web 页面适合看整体状态,命令行更适合做三件事:第一,快速确认应用、队列、节点和日志的真实状态;第二,把一次排查过程沉淀成可以复用的脚本;第三,在页面打不开、代理跳
2025-03-22
12
05
02
26
19
12
【YARN 权威指南】8. 理解 MapReduce on YARN 【YARN 权威指南】8. 理解 MapReduce on YARN
MapReduce 运行在 YARN 上以后,最容易产生的误解是:YARN 只是把原来的 MapReduce 作业搬到另一套资源管理器上运行。这个理解只对了一半。真正重要的变化,是 MapReduce 不再独占集群调度模型。它退回成 YAR
2025-02-12
05
【YARN 权威指南】7. 理解 Capacity Scheduler 【YARN 权威指南】7. 理解 Capacity Scheduler
YARN 的架构把资源管理和应用框架拆开以后,ResourceManager 的核心职责之一就变成了:资源到底应该分给谁。一个共享集群里可能同时有离线 ETL、临时查询、报表任务、算法任务和测试任务。如果所有应用都直接抢同一池资源,先提交的
2025-02-05
01
29
22
15
12
24
18
Redis 系列 15. Redisson 与 RedLock Redis 系列 15. Redisson 与 RedLock
1. 为什么要讲 Redisson上一篇手写了 Redis 分布式锁,但生产项目里不建议每个团队都维护一套锁实现。分布式锁实现涉及多种工程边界问题,关键复杂度来自锁语义与异常边界处理,比如可重入、续期、释放校验、异常恢复、等待队列、主从切换
2024-12-18
6 / 35