Plumb 对比 mshumer/gpt-prompt-engineer - GitHub

Plumb 让 AI 顾问能够通过可视化节点编辑器构建、部署和销售自主工作流程，无需编写代码。每个流程都有自己的前端，按需或自动运行，并接受文本、音频、图像和视频输入。访问需通过 signup.useplumb.com 的私人测试申请。

当通用工作流程工具仅限于内部任务时，Plumb 面向销售 AI 服务的人群。你可以发布流程，推送更新而无需克隆副本，设置一次性费用、订阅或按次收费的付费墙，并分享推广页面。该以顾问为先的变现层是其与广泛无代码自动化套件的主要区别。

自由职业 AI 顾问、代理团队和内部推动者，尤其是那些原型多模态模型管道的用户，最适合使用。流程可根据条件分支，并将输出路由至电子邮件、短信或 Slack。

mshumer/gpt-prompt-engineer 是一个开源的提示词工程工具包，可为您定义的任务生成、测试和排序候选提示词。您描述用例、提供测试用例，笔记本会创建多个提示词变体，在每个测试用例上运行它们，并使用 ELO 评分系统（起始分为 1200）对结果进行排序。它以 Jupyter 笔记本形式提供，您可以在 Google Colab 或本地运行。

大多数提示词工具一次只帮助您编写一个提示词。gpt-prompt-engineer 则将提示词选择视为一场锦标赛：数十个候选提示词在您的测试用例上竞争，最高 ELO 分数会显示出获胜者。单独的笔记本涵盖分类任务、使用自动生成测试用例的 Claude 3 Opus，以及用于降低推理成本的 Opus-to-Haiku 转换。可选的 Weights & Biases 和 Portkey 可记录每次运行的追踪信息。

ML 工程师、提示词工程师和 AI 开发者在需要可复现的提示词调优（而非手动反复试错）时会使用它。该仓库在 GitHub 上获得了 9.7k 星标，并可使用您自己的 OpenAI 或 Anthropic API 密钥运行。它在 MIT 许可证下免费使用。