llamafile von Mozilla packt ein Modell und llama.cpp in eine einzige tragbare ausführbare Datei: eine Datei herunterladen, ausführen und eine lokale Chat-Benutzeroberfläche plus eine OpenAI-kompatible API erhalten.
| Kategorie | LLMs lokal ausführen |
| Typ | Einzeldatei-Laufzeit |
| Lizenz | Apache-2.0 |
| Läuft lokal | Ja |
| Hergestellt mit | C/C++ |
| Fähigkeitsstufe | Anfänger |
| Am besten für | ein Modell teilen, das überall ohne Installation läuft |
Andere Open-Source-Tools zum lokalen Ausführen von LLMs, die einen Vergleich wert sind:
OllamaFühren Sie offene LLMs lokal mit einem Befehl aus
JanOpen-Source, offline ChatGPT-ähnliche Desktop-App
GPT4AllPrivate lokale KI, die auf CPU läuft
llama.cppDie C/C++-Engine, die lokale Inferenz antreibt
LocalAIEine OpenAI-API, die Sie selbst hosten
Text Generation WebUIFunktionsreiche Web-UI für lokale Modelle
KoboldCppEinzeldatei-Läufer für lokale Modelle
MLC LLMLLMs auf jedem Gerät ausführen, sogar auf Handys
exoFühren Sie große Modelle auf Ihren Alltagsgeräten aus
CortexOllama-Stil Laufzeit vom Jan-Team
Nexa SDKFühren Sie jedes Modell auf jedem Gerät aus — CPU, GPU, NPU
RamaLamaFühren Sie Modelle als OCI-Container aus
GPUStackVerwalten Sie GPU-Cluster zum Ausführen von Modellenllamafile ist kostenlos und Open-Source (Apache-2.0-Lizenz), sodass Sie es kostenlos verwenden, selbst hosten und ändern können.
Ja. llamafile ist dafür ausgelegt, auf Ihrem eigenen Computer oder Server zu laufen, um Ihre Daten privat zu halten.
Beliebte Open-Source-Alternativen sind Ollama, LM Studio, Jan. Sehen Sie sich die Vergleiche oben an, um zu wählen.
Durchsuchen Sie das vollständige Verzeichnis von Open-Source-AI-Tools, Modellen und Projekten – täglich aktualisiert.
Alle Tools durchsuchen →