# promptfoo

命令行工具 · https://godooo.ai/zh/cli/promptfoo

> promptfoo 是 OpenAI 出品的开源 AI 命令行工具，2023 年推出，面向开发者、企业。

测试提示词与模型、对大模型应用做红队攻防的命令行工具。

主打：评测与观测。开源，可以免费使用。使用方式：命令行、本地离线运行、自部署。

## 速览

- **类别:** [命令行工具](https://godooo.ai/zh/browse#cli)
- **出品方:** [OpenAI](https://godooo.ai/zh/org/openai)
- **推出于:** 2023
- **所属星系:** [编程开发](https://godooo.ai/zh/galaxy/code)
- **价格:** 开源免费
- **是否开源:** 是 · MIT
- **源代码:** [github.com/promptfoo/promptfoo](https://github.com/promptfoo/promptfoo)
- **GitHub 星标:** 25,416
- **使用方式:** 命令行 · 可离线本地运行 · 可自部署
- **适合谁:** 开发者 · 企业
- **官网:** [promptfoo.dev](https://promptfoo.dev)

## 能做什么

- **[评测与观测](https://godooo.ai/zh/capability/llm-evaluation)** — 主打, _由机器提出，尚待校准_. “Evaluations Test and evaluate your prompts, models, and RAG pipelines” (摘自 [promptfoo.dev](https://www.promptfoo.dev/)，2026-09-24)

## 平替与同类

- **[DeepEval](https://godooo.ai/zh/framework/deepeval)** (开源免费): 同样能做：评测与观测
- **[Langfuse](https://godooo.ai/zh/product/langfuse)** (开源免费): 同样能做：评测与观测
- **[Phoenix](https://godooo.ai/zh/framework/phoenix)** (开源免费): 同样能做：评测与观测
- **[Ragas](https://godooo.ai/zh/framework/ragas)** (开源免费): 同样能做：评测与观测
- **[Pydantic AI](https://godooo.ai/zh/framework/pydantic-ai)** (开源免费): 同样能做：评测与观测

## 常见问题

### promptfoo 是什么？

promptfoo 是 OpenAI 出品的开源 AI 命令行工具，2023 年推出，面向开发者、企业。测试提示词与模型、对大模型应用做红队攻防的命令行工具。

### promptfoo 免费吗？

免费。promptfoo 是开源软件（MIT）。

### promptfoo 开源吗？

开源，许可证是 MIT。源代码在 https://github.com/promptfoo/promptfoo。

### promptfoo 能本地运行吗？

能，可以在自己的电脑上离线运行。也可以部署在自己的服务器上。

### promptfoo 能做什么？

主打：评测与观测。

### promptfoo 是谁开发的？

由 OpenAI 开发。

### promptfoo 有哪些开源替代品？

开源的有：DeepEval、Langfuse、Phoenix、Ragas、Pydantic AI。

## 来源

- [promptfoo.dev](https://www.promptfoo.dev/) — 核实于 2026-09-24
- [promptfoo.dev](https://promptfoo.dev)
- [github.com](https://github.com/promptfoo/promptfoo)

---

最后更新 2026-09-24 · 来源核实于 2026-09-24 · 这是 https://godooo.ai/zh/cli/promptfoo 的 Markdown 版本。本站每个页面都有：在地址后面加 .md。