Nexa SDK exécute des modèles de texte, de vision, d'audio et d'image localement sur des backends CPU, GPU et NPU, avec une API unique et un serveur compatible OpenAI.
| Catégorie | Exécuter des LLM localement |
| Type | Exécution locale (SDK) |
| Licence | Apache-2.0 |
| S'exécute localement | Oui |
| Construit avec | Python |
| Niveau de compétence | Intermédiaire |
| Meilleur pour | développeurs ciblant de nombreux types de dispositifs à partir d'une seule base de code |
Autres outils open-source pour exécuter des LLM localement qui valent la peine d'être comparés :
OllamaExécuter des LLM open-source localement avec une seule commande
JanApplication de bureau de style ChatGPT open-source et hors ligne
GPT4AllIA locale privée qui s'exécute sur CPU
llama.cppLe moteur C/C++ alimentant l'inférence locale
LocalAIUne API OpenAI à auto-héberger
Text Generation WebUIInterface web riche en fonctionnalités pour les modèles locaux
KoboldCppExécuteur de modèle local en un seul fichier
MLC LLMExécuter des LLM sur n'importe quel appareil, même les téléphones
llamafileUn fichier exécutable = modèle + runtime
exoExécutez de grands modèles sur vos appareils quotidiens
CortexRuntime de style Ollama de l'équipe Jan
RamaLamaExécutez des modèles en tant que conteneurs OCI
GPUStackGérez des clusters GPU pour exécuter des modèlesNexa SDK est gratuit et open-source (licence Apache-2.0), vous pouvez donc l'utiliser, l'auto-héberger et le modifier sans frais.
Oui. Nexa SDK est conçu pour fonctionner sur votre propre machine ou serveur, gardant vos données privées.
Les alternatives open-source populaires incluent Ollama, LM Studio, Jan. Consultez les comparaisons ci-dessus pour choisir.
Parcourez le répertoire complet des outils, modèles et projets d'IA open-source — mis à jour quotidiennement.
Parcourez tous les outils →