Promptfoo

LLM 应用最难维护的，往往不是把模型接上，而是回答品质一变差时，你能不能快速知道原因。Promptfoo 把 prompt、模型、测试案例、评测断言与红队扫描收进同一套 CLI／library 流程，让模型比较、回归测试与安全检查可以在本机重跑，也能接到 CI/CD。本文从一个可落地的评测流程开始，拆解它适合解决的问题、导入步骤与不能忽略的限制。