上一页 1 2 3 4 5 6 ··· 15 下一页
摘要: 前面讲了 SlotManager 的启动流程,这篇聚焦资源申请的完整链路。你有没有想过,JobMaster 需要 Slot 时,一次 requestSlot 调用经过了哪些组件?SlotPool 到 ResourceManager 到 SlotManager 再到 TaskExecutor,每个环节 阅读全文
posted @ 2026-11-11 16:03 starzy 阅读(3) 评论(0) 推荐(0)
摘要: 前面几篇分别讲了 ResourceManager、Dispatcher、JobManager 的启动流程,这篇聚焦 Flink 资源管理的核心——SlotManager。你有没有想过,JobMaster 向 ResourceManager 申请 Slot 后,SlotManager 内部是如何找到合 阅读全文
posted @ 2026-11-11 09:04 starzy 阅读(8) 评论(0) 推荐(0)
摘要: 前面几篇分别讲了 ApplicationMaster、ResourceManager、Dispatcher 的启动流程,这篇聚焦 Flink 集群的核心——JobManager。你有没有想过,执行 bin/yarn-session.sh 或 bin/flink run -m yarn-cluster 阅读全文
posted @ 2026-11-10 09:05 starzy 阅读(6) 评论(0) 推荐(0)
摘要: 上一篇讲了 Flink ResourceManager 的启动流程,RM 启动后会管理 Slot 和 TaskManager。这篇聚焦 Dispatcher——Flink 集群的作业分发器。你有没有想过,一条 flink run 命令提交的 JobGraph,是如何到达集群并启动作业的?Dispat 阅读全文
posted @ 2026-11-09 09:04 starzy 阅读(11) 评论(0) 推荐(0)
摘要: 上一篇讲了 Flink ApplicationMaster 的启动流程,AM 启动后会依次启动 ResourceManager、Dispatcher、REST 端点。这篇聚焦 ResourceManager——Flink 集群的资源管理中心。你有没有想过,RM 启动后内部依次初始化了哪些组件?Slo 阅读全文
posted @ 2026-11-07 09:11 starzy 阅读(10) 评论(0) 推荐(0)
摘要: 大数据技术实践者 | LangChain Agent 实战系列 · 17 一、十秒黑盒:Agent 体验的头号杀手 前面几篇把 Agent 的能力链路补齐了:提示词定人格、工具做事、结构化输出交付、异步扛并发。但还有一个体验问题始终悬着——慢。 一次典型的 Agent 运行,内部要走完"模型 → 工 阅读全文
posted @ 2026-11-06 10:29 starzy 阅读(8) 评论(0) 推荐(0)
摘要: 大数据技术实践者 | LangChain Agent 实战系列 · 19 上一篇讲了短期记忆的三要件,thread_id、checkpointer 与 state 容器各管什么。这一篇往下走一层,讲怎么用。挂载是三行代码的事,真正决定能不能上生产的是后面这几件事,数据库选型、字段扩展、事后修正、动态 阅读全文
posted @ 2026-11-05 20:13 starzy 阅读(17) 评论(0) 推荐(0)
摘要: 大数据技术实践者 | LangChain Agent 实战系列 · 18 一、同一个问题问两次,第二次就忘了 上一篇把流式输出打通了,Agent 总算能边想边说。可把它接进真实业务,很快撞上另一件事。用户第一句说"我叫张三",第二句问"我叫什么",模型客客气气地回一句"抱歉,我不知道你的名字"。 这 阅读全文
posted @ 2026-11-05 17:30 starzy 阅读(14) 评论(0) 推荐(0)
摘要: 在 YARN 上运行 Flink 作业时,你有没有想过,一条 flink run-application 命令背后,YARN 是如何分配容器、启动 ApplicationMaster 的?AM 进程启动后,Flink 内部又依次启动了哪些组件?Dispatcher、ResourceManager、J 阅读全文
posted @ 2026-11-05 09:56 starzy 阅读(3) 评论(0) 推荐(0)
摘要: 每个 Flink 开发者都在和配置打交道——flink-conf.yaml 里密密麻麻的参数,提交命令里的 -D 动态属性,代码里的 env.getConfig() 设置。但你真的理解 Flink 配置体系吗?五种配置来源的优先级是什么?GlobalConfiguration 是怎么加载配置的?Co 阅读全文
posted @ 2026-11-04 08:35 starzy 阅读(17) 评论(0) 推荐(0)
上一页 1 2 3 4 5 6 ··· 15 下一页