Promptfoo

Testes unitários para seus prompts
Framework LLM / RAGTeste de promptsMITExecuta localmenteTypeScriptIniciante
OSAI Pulse ⓘ ★★★★★★★★★★ /100 sinais rastreados
🐳 pulls do Docker 📦 downloads do PyPI / mês 📦 downloads do npm / mês 🚀 Última versão ·
Visitar site →Ver no GitHub

O que é Promptfoo?

Promptfoo executa seus prompts contra casos de teste em modelos, detectando regressões antes que cheguem à produção, e inclui verificações de red-teaming.

Por que as pessoas escolhem Promptfoo

Promptfoo em um relance

CategoriaFramework LLM / RAG
TipoTeste de prompts
LicençaMIT
Executa localmenteSim
Construído comTypeScript
Nível de habilidadeIniciante
Melhor paraequipes enviando prompts para produção

Alternativas de código aberto ao Promptfoo

Outras ferramentas de frameworks llm / rag de código aberto que valem a pena comparar:

LangChainCompor cadeias, ferramentas e agentesLlamaIndexA estrutura de dados para RAGHaystackPipelines de produção para busca e RAGDSPyModelos de linguagem — não prompts — de programaçãotxtaiBanco de dados de embeddings tudo-em-umRAGFlowRAG de compreensão profunda de documentosSemantic KernelFramework de agente empresarial da MicrosoftGraphRAGRAG que constrói primeiro um gráfico de conhecimentoLiteLLMUma API para mais de 100 provedores de LLMInstructorSaídas estruturadas confiáveis de LLMsOutlinesGaranta JSON e gramáticas válidasGuidanceIntercale controle e geraçãoLLMWareRAG empresarial com pequenos modelos especializadosFlashRankReclassificação ultra-leve para melhor RAGSentence TransformersA maneira padrão de criar embeddingsRagasMeça se o seu RAG é bomLangfuseVeja o que seu aplicativo LLM realmente fezPhoenixRastreie, avalie e depure aplicativos LLM

Promptfoo cara a cara

Promptfoo vs LangChainPromptfoo vs LlamaIndexPromptfoo vs HaystackPromptfoo vs DSPyPromptfoo vs txtaiPromptfoo vs RAGFlowPromptfoo vs Semantic KernelPromptfoo vs GraphRAGPromptfoo vs LiteLLMPromptfoo vs InstructorPromptfoo vs OutlinesPromptfoo vs GuidancePromptfoo vs LLMWarePromptfoo vs FlashRankPromptfoo vs Sentence TransformersPromptfoo vs RagasPromptfoo vs LangfusePromptfoo vs Phoenix

FAQ

Promptfoo é gratuito?

Promptfoo é gratuito e de código aberto (licença MIT), então você pode usar, auto-hospedar e modificar sem custo.

Posso executar o Promptfoo localmente?

Sim. O Promptfoo é projetado para rodar na sua própria máquina ou servidor, mantendo seus dados privados.

Qual é a melhor alternativa ao Promptfoo?

Alternativas populares de código aberto incluem LangChain, LlamaIndex, Haystack. Veja as comparações acima para escolher.

Explore mais IA de código aberto

Navegue pelo diretório completo de ferramentas, modelos e projetos de IA de código aberto — atualizado diariamente.

Navegue por todas as ferramentas →