llamafile de Mozilla empaqueta un modelo y llama.cpp en un solo ejecutable portátil: descarga un archivo, ejecútalo y obtén una interfaz de chat local más una API compatible con OpenAI.
| Categoría | Ejecutar LLMs localmente |
| Tipo | Tiempo de ejecución de un solo archivo |
| Licencia | Apache-2.0 |
| Ejecuta localmente | Sí |
| Construido con | C/C++ |
| Nivel de habilidad | Principiante |
| Mejor para | compartiendo un modelo que se ejecuta en cualquier lugar sin instalación |
Otras herramientas de código abierto para ejecutar LLMs localmente que vale la pena comparar:
OllamaEjecutar LLMs abiertos localmente con un solo comando
JanAplicación de escritorio estilo ChatGPT de código abierto y sin conexión
GPT4AllIA local privada que se ejecuta en CPU
llama.cppEl motor C/C++ que impulsa la inferencia local
LocalAIUna API de OpenAI que autohospedas
Text Generation WebUIInterfaz web rica en funciones para modelos locales
KoboldCppEjecutor de modelo local en un solo archivo
MLC LLMEjecutar LLMs en cualquier dispositivo, incluso teléfonos
exoEjecuta grandes modelos en tus dispositivos cotidianos
CortexTiempo de ejecución estilo Ollama del equipo de Jan
Nexa SDKEjecuta cualquier modelo en cualquier dispositivo — CPU, GPU, NPU
RamaLamaEjecuta modelos como contenedores OCI
GPUStackGestiona clústeres de GPU para ejecutar modelosllamafile es gratis y de código abierto (licencia Apache-2.0), así que puedes usarlo, autoalojarlo y modificarlo sin costo.
Sí. llamafile está diseñado para ejecutarse en tu propia máquina o servidor, manteniendo tus datos privados.
Las alternativas populares de código abierto incluyen Ollama, LM Studio, Jan. Consulta las comparaciones anteriores para elegir.
Navega por el directorio completo de herramientas, modelos y proyectos de IA de código abierto, actualizado diariamente.
Navega todas las herramientas →