命令行工具
promptfoo
promptfoo 是 OpenAI 出品的开源 AI 命令行工具，2023 年推出，面向开发者、企业。
测试提示词与模型、对大模型应用做红队攻防的命令行工具。
主打：评测与观测。开源，可以免费使用。使用方式：命令行、本地离线运行、自部署。
这是 https://godooo.ai/zh/cli/promptfoo 的 Markdown 版本。本站每个页面都有：在地址后面加 .md。
速览
能做什么
评测与观测主打待校准
“Evaluations Test and evaluate your prompts, models, and RAG pipelines”— promptfoo.dev, 2026-09-24
待校准由机器提出，尚待校准
平替与同类
常见问题
promptfoo 是什么？
promptfoo 是 OpenAI 出品的开源 AI 命令行工具，2023 年推出，面向开发者、企业。测试提示词与模型、对大模型应用做红队攻防的命令行工具。
promptfoo 免费吗？
免费。promptfoo 是开源软件（MIT）。
promptfoo 开源吗？
开源，许可证是 MIT。源代码在 https://github.com/promptfoo/promptfoo。
promptfoo 能本地运行吗？
能，可以在自己的电脑上离线运行。也可以部署在自己的服务器上。
promptfoo 能做什么？
主打：评测与观测。
promptfoo 是谁开发的？
由 OpenAI 开发。
promptfoo 有哪些开源替代品？
开源的有：DeepEval、Langfuse、Phoenix、Ragas、Pydantic AI。