Fiche outil

vllm-project/semantic-router

github.com

Une couche de décision ouverte et programmable qui achemine chaque appel LLM vers le meilleur modèle et le meilleur backend de calcul.

Visites mensuellesN/D
Rang mondialN/D
Publié le17 oct. 2026
TarifsOpen source

Ce qu'il fait

vllm-project/semantic-router

github.com

vLLM Semantic Router offre aux harnais d'agents une API unique pour de nombreux modèles, sélectionnant ou combinant les backends par appel selon votre politique de qualité, latence, coût et localisation. Il s'adresse aux équipes exécutant des agents LLM sur des infrastructures locales, privées et cloud qui souhaitent un routage et des garde-fous cohérents. Il est écrit en Go et proposé comme un projet open source installable avec documentation et aire de jeu en ligne.

TarifsOpen source
NoteN/D
Favoris0

Tags

Catégories

Aucun résumé n'a encore été ajouté.

githubopen-sourcellmai-gatewaypytorchkubernetesinferenceguardrailsllmroutermixture-of-models

FAQ

Questions fréquentes

Qu’est-ce que vllm-project/semantic-router ?
vLLM Semantic Router offre aux harnais d'agents une API unique pour de nombreux modèles, sélectionnant ou combinant les backends par appel selon votre politique de qualité, latence, coût et localisation. Il s'adresse aux équipes exécutant des agents LLM sur des infrastructures locales, privées et cloud qui souhaitent un routage et des garde-fous cohérents. Il est écrit en Go et proposé comme un projet open source installable avec documentation et aire de jeu en ligne.
Combien coûte vllm-project/semantic-router ?
vllm-project/semantic-router applique un modèle tarifaire : Open source. Consultez le site officiel pour les offres actuelles.
À quoi sert vllm-project/semantic-router ?
vllm-project/semantic-router est référencé sur TolsAI dans ces catégories : Open Source.
Où utiliser vllm-project/semantic-router ?
vllm-project/semantic-router est disponible sur son site officiel, github.com.

Explorer

Plus dans Open Source

mindsdb/antonOpen Source

Un harnais agentique open source pour un agent IA auto-améliorant qui planifie et exécute les tâches que vous décrivez.

Open sourcegithub

Un moteur RAG sans vecteurs, basé sur le raisonnement, qui indexe les documents sous forme d'arbres et effectue la récupération avec le raisonnement d'un LLM.

Open sourcegithub

Une bibliothèque Python de type PyTorch pour construire et auto-optimiser des workflows LLM tels que les chatbots, le RAG et les agents.

Open sourcegithub

Une interface web modulaire pour générer des images, des vidéos et de l'audio avec des modèles d'IA comme Stable Diffusion, Flux et Wan.

Open sourcegithub

Un guide étape par étape pour concevoir des systèmes d'IA basés sur les LLM, le RAG et les agents d'IA.

Open sourcegithub

Moteur de pipeline d'IA open source pour créer, déboguer et déployer des workflows LLM et l'orchestration d'agents depuis votre IDE.

Open sourcegithub

Discussion

Discussion

Aucun commentaire pour le moment. Lancez la discussion.