Netflix 重构 Conductor,以支持每月 4.2 亿次的工作流执行以及 10 倍规模的工作流
英文标题:Netflix 重构 Conductor,以支持每月 4.2 亿次的工作流执行以及 10 倍规模的工作流
点击查看原文>
打开原文相关 2 · 机会 0
3.4 KB
89.8 KB
84.2 KB
34.9 KB
1.4 KB
1.9 KB
794 B
1.3 KB
3.2 MB
中文
Netflix 重构 Conductor 工作流引擎,支撑 20 万工作流、4.2 亿次/月执行,任务容量提升 12 倍,p99 评估延迟下降 40%。核心突破在于分离元数据与运行时数据,采用轻量蓝图驱动按需加载。
任务与元数据物理分离;评估器仅加载下一次决策所需任务;索引(ES)、执行(Kafka/Timestone)、存储(Iceberg/S3)彻底解耦。
适合分布式系统工程师、工作流平台开发者、云原生中间件架构师阅读。
English / 原文
Netflix 重构 Conductor 工作流引擎,支撑 20 万工作流、4.2 亿次/月执行,任务容量提升 12 倍,p99 评估延迟下降 40%。核心突破在于分离元数据与运行时数据,采用轻量蓝图驱动按需加载。
任务与元数据物理分离;评估器仅加载下一次决策所需任务;索引(ES)、执行(Kafka/Timestone)、存储(Iceberg/S3)彻底解耦。
适合分布式系统工程师、工作流平台开发者、云原生中间件架构师阅读。