SGLang 團隊與 Google、Meta 開源 TPU 推理服務棧
2026/10/20 — 10/21 02:19·1 個來源(全部)·1 篇報道(全部)
核心速覽 (Key Takeaways)
- RadixArk 的 SGLang 團隊與 Google、Meta 合作開源了 SGLang-TorchTPU,讓開發者在 TPU 上以 PyTorch 原生方式做生產級模型服務,無需為另一套執行時重寫模型。
- 首發支援的模型包括 GLM-5.3、GLM-5.3 Flash、Kimi K3、DeepSeek 等。
事件背景與詳細解讀
2026 年 10 月 20 日,RadixArk 的 SGLang 團隊宣佈與 Google、Meta 合作,開源了 SGLang-TorchTPU。據該團隊公佈的資訊,這套推理服務棧用於在 TPU 上以 PyTorch 原生方式執行生產級模型服務。
首發支援的模型包括 Muse Spark Open、GLM-5.3、GLM-5.3 Flash、Kimi K3 和 DeepSeek 等。目前公開材料只覆蓋到開源釋出與首發模型名單這一步,後續進展尚未披露。
AI 綜合 1 篇報道生成 · 更新於 2 小時前
最新進展RadixArk 的 SGLang 團隊與 Google、Meta 合作開源了 SGLang-TorchTPU,用於在 TPU 上以 PyTorch 原生方式做生產級模型服務。首發支援模型包括 GLM-5.3、GLM-5.3 Flash、Kimi K3、DeepSeek 等。
- 熱度指數
- 56
- 全部來源
- 1
- 全部報道
- 1
- 首報
- 20 小時前
這件事的報道 點標題看原文
RadixArk 的 SGLang 團隊與 Google、Meta 合作開源了 SGLang-TorchTPU,用於在 TPU 上以 PyTorch 原生方式做生產級模型服務。首發支援模型包括 GLM-5.3、GLM-5.3 Flash、Kimi K3、DeepSeek 等。
在 TPU 上部署推理的團隊現在可以直接用這套開源棧。
LMSYS / SGLang官方AI 評分 55
同時在說的其他事
- 熱度指數 513新爆Google 與 Meta 開源 TorchTPU 後端6 個來源
- 熱度指數 1022美國 DHS 下令聯邦民事機構清除 DeepSeek 技術16 個來源
- 熱度指數 978爆DeepSeek 開源大規模推理框架 DeepInfer12 個來源
- 熱度指數 791發酵中MiniMax M3.1 Flash 正式版上線 Cline 與 gmi_cloud17 個來源
- 熱度指數 526發酵中Nscale 與 Anthropic 洽談約 450 億美元算力協議8 個來源
熱度怎麼算的?瞭解口徑收起
熱度按 48 小時內有多少個獨立來源在說這件事算:同一個來源發多條只算一次,並按 24 小時半衰期衰減,所以排前面的是很多人在說的事。
本頁彙總公開訂閱源,標題與摘要由模型整理,版權歸原作者所有;重要資訊請回原文核對。如權利人認為相關標題或摘要侵權,請通過頁尾聯絡郵箱提供具體頁面與權利依據,我們核實後會及時刪除或替換。
- 爆
- 討論快速增加
- 新
- 首報 6 小時內
- 發酵中
- 討論仍在增加
