O Nexa SDK executa modelos de texto, visão, áudio e imagem localmente em backends de CPU, GPU e NPU, com uma única API unificada e servidor compatível com OpenAI.
| Categoria | Executar LLMs localmente |
| Tipo | Tempo de execução local (SDK) |
| Licença | Apache-2.0 |
| Executa localmente | Sim |
| Construído com | Python |
| Nível de habilidade | Intermediário |
| Melhor para | desenvolvedores visando muitos tipos de dispositivos a partir de uma única base de código |
Outras ferramentas de código aberto para executar LLMs localmente que valem a pena comparar:
OllamaExecutar LLMs abertos localmente com um comando
JanAplicativo de desktop estilo ChatGPT, offline e de código aberto
GPT4AllIA local privada que roda em CPU
llama.cppO motor C/C++ que alimenta a inferência local
LocalAIUma API OpenAI que você hospeda
Text Generation WebUIInterface web rica em recursos para modelos locais
KoboldCppExecutor de modelo local em um único arquivo
MLC LLMExecutar LLMs em qualquer dispositivo, até mesmo em telefones
llamafileUm arquivo executável = modelo + tempo de execução
exoExecute grandes modelos em seus dispositivos do dia a dia
CortexTempo de execução estilo Ollama da equipe Jan
RamaLamaExecute modelos como contêineres OCI
GPUStackGerencie clusters de GPU para executar modelosO Nexa SDK é gratuito e de código aberto (licença Apache-2.0), então você pode usar, auto-hospedar e modificar sem custo.
Sim. O Nexa SDK é projetado para ser executado em sua própria máquina ou servidor, mantendo seus dados privados.
Alternativas populares de código aberto incluem Ollama, LM Studio, Jan. Veja as comparações acima para escolher.
Navegue pelo diretório completo de ferramentas, modelos e projetos de IA de código aberto — atualizado diariamente.
Navegue por todas as ferramentas →