Humanloop

Humanloop

Humanloop曾是一个企业级平台,用于构建和运营LLM应用程序。产品团队可以通过它在一个工作流程中进行评估、提示管理和可观测性,提供UI和以代码为导向的路径,方便工程师和主题专家使用。

该平台支持提示、代理、工具、数据集、流程和评估器,以及日志记录、部署环境和如Vercel AI SDK等的集成。Humanloop将自己定位为一个基于评估的开发环境,团队可以比较不同版本的提示,运行自动和人工评估,并监控生产环境的使用情况。

Humanloop在2025年8月宣布其团队已加入Anthropic,平台将于2025年9月8日关闭。收费在2025年7月30日停止,服务也不再向新用户提供。

主要功能:
  1. 在用户界面或代码中运行评估,包括代理、RAG 和 CI/CD 工作流

  2. 管理带有版本历史和部署环境的提示、代理、工具、数据集和流程

  3. 监控生产日志,收集用户反馈,并随时间抽查质量

  4. 在同一评估流程中使用代码评估器、LLM 作为裁判和人工审查员

  5. 在平台下线前通过 Humanloop 导出工具导出提示和项目数据

Pros:
  1. 在一个平台中结合评估、提示管理和可观察性,专为企业级大型语言模型团队设计。

  2. 支持面向产品经理的UI优先工作流和面向工程师的代码优先工作流。

  3. 在平台退役时,提供结构化导出工具和迁移指导。

Cons:
  1. 该平台已于2025年9月8日停止运营,现已无法使用。

  2. Anthropic 的人才收购并未包含 Humanloop 平台资产,因此 Humanloop 品牌下没有直接的后续产品。

常见问题:

Humanloop 还可以使用吗?

不可以。Humanloop 于 2025 年 9 月 8 日停止运营,在宣布其团队加盟 Anthropic 后关闭了平台。该网站现仅提供收购公告和迁移文档,产品已不再运行。

Humanloop 关闭后,数据怎么办了?

Humanloop 表示账户及相关数据(包括文件、版本、日志和评估)将于 2025 年 9 月 8 日被永久删除。客户被要求在此日期前,使用迁移指南和导出工具导出数据。

Humanloop 在关闭前做了什么?

Humanloop 提供企业级大语言模型(LLM)评估、提示管理和可观察性工具。团队用其测试提示和代理,管理跨环境的部署,并监控生产环境中的 LLM 应用。

Humanloop 被谁收购了?

Anthropic 于 2025 年 8 月收购了 Humanloop 的联合创始人和工程团队,属于“人才收购”(acqui-hire)。Anthropic 并未收购 Humanloop 的平台资产或知识产权,独立产品被逐步关闭。

客户如何导出 Humanloop 数据?

Humanloop 在 GitHub 发布了迁移指南和开源导出工具。导出过程需使用 Humanloop API 密钥,工具可下载提示、工具、数据集、流程、代理、评估器、日志及评估结果,格式为 JSON 和 JSONL。

分类:

定价:

付费

标签:

LLM Evaluation
Prompt Management
Observability
LLMOps
Developer Tools

使用的技术:

Next.js
Vercel
Google Tag Manager
Vercel Analytics
Ruby
GitHub
Webpack
Tailwind CSS

评论:

Give your opinion on Humanloop :-

Overall rating

Join thousands of AI enthusiasts in the World of AI!

最佳免费 Humanloop 替代方案(和付费)

By Rishit