微信公众号·Jason的算法日志
关闭SGLang 与 vLLM 的下半场:AI Infra 商业化 & 三点「非共识」
AI评分 29深度13·结构·仅据标题摘要互动数据需从 wechatDownload 导出导入
vLLM/SGLang 解决的是生成侧“请求如何高效跑起来”.RL 框架要把训练侧的参数分片重排成推理侧需要的 TP/EP 布局,再快速广...
2026年9月12日·sogou · weread·当前显示 49 / 49 篇
真实扫描归档:每篇含公众号、发布时间、可点链接(搜狗中转或 mp 直链)
49 / 49
微信公众号·Jason的算法日志
关闭互动数据需从 wechatDownload 导出导入
vLLM/SGLang 解决的是生成侧“请求如何高效跑起来”.RL 框架要把训练侧的参数分片重排成推理侧需要的 TP/EP 布局,再快速广...