#Fan-Out
2 posts tagged "fan-out"
14
Part 14 — FDE core topic - Speculative Tool Execution:大扇出控制與投機雙發防禦
深入剖析 Agent 並行 15 個工具呼叫時如何以投機雙發(Hedged Request)壓制 P99 尾部延遲、用硬截止時間搭配優雅降級回傳部分結果,將並行等待的長尾從約 3–5 秒壓到 1.5 秒以內。
52
Part 52 — FDE 面試指南 Part 52:百萬級 Agent Tool-Calling 的全域非同步並行優化與扇出控制
深度剖析 LangGraph Agent 在高並發場景下的 Tool Fan-Out 架構設計:Speculative Execution、Circuit Breaker、Graceful Degradation 與 Partial Rendering 的工程實踐,含三個演進階段與完整 Staff 級解答。