工具詳情

smg-project/smg

github.com

565 stars · updated 2026-10-11 · Rust

月造訪量暫無
全球排名暫無
收錄時間2026年10月17日
價格類型價格未知

工具介紹

smg-project/smg

github.com

Engine-agnostic LLM gateway in Rust. Full OpenAI & Anthropic API compatibility across vLLM, TRT-LLM, TokenSpeed, SGLang, OpenAI, Gemini & more. Industry-first gRPC pipeline, KV cache-aware routing, chat history, tokenization caching, Responses API, embeddings, WASM plugins, MCP, and multi-tenant auth.

價格類型價格未知
評分暫無
收藏數0

標籤

所屬分類

目前還沒有精簡摘要。

githubopen-sourcellmclaudeanthropicgeminichatanthropic-apiinference-gatewaylightseek

FAQ

常見問題

smg-project/smg 是什麼?
Engine-agnostic LLM gateway in Rust. Full OpenAI & Anthropic API compatibility across vLLM, TRT-LLM, TokenSpeed, SGLang, OpenAI, Gemini & more. Industry-first gRPC pipeline, KV cache-aware routing, chat history, tokenization caching, Responses API, embeddings, WASM plugins, MCP, and multi-tenant auth.
smg-project/smg 可以用來做什麼?
smg-project/smg 在 TolsAI 上歸入以下分類:Open Source。
在哪裡可以使用 smg-project/smg?
可以在 smg-project/smg 的官網 github.com 使用。

探索

Open Source 的更多工具

mindsdb/antonOpen Source

755 stars · updated 2026-10-04 · Python

未提供價格github

2,317 stars · updated 2026-10-04 · Python

未提供價格github
pykeio/ortOpen Source

2,569 stars · updated 2026-10-17 · Rust

未提供價格github

討論

討論

目前還沒有留言,來開啟討論吧。