Handit.ai
Handit.ai 全天候监控生产环境中的 AI 代理流量,发现诸如幻觉、模式中断和个人身份信息泄露等故障,然后起草修复方案,在真实故障案例中进行测试,并创建 GitHub 拉取请求,供您在合并前审查。该开源 MIT 项目面向使用 LangChain、LangGraph 或自定义 Python 和 JavaScript 代理的团队,旨在实现与实际修复循环相结合的监控。
PagerDuty 警报会通知您出现故障;Handit.ai 尝试发布修复方案。其 CLI 通过运行 npx @handit/cli setup,在五分钟内完成 SDK 跟踪、API 密钥和 GitHub 应用的配置,然后将跟踪数据流式传输到仪表板,同时生成针对生产故障验证的提示、配置和护栏补丁。
机器学习工程师、后端开发人员和 AI 平台团队使用 Handit.ai 进行代理可靠性监控、幻觉检测、自动提示修复以及基于 GitHub 的部署工作流。Python 和 JavaScript SDK 以及 HTTP API 支持 LangChain、LangGraph、CrewAI 和 LlamaIndex 技术栈,同时核心仓库在 GitHub 上保持可审计。
实时监控每个代理请求,标记幻觉、架构中断和PII泄露
使用npx @handit/cli setup在五分钟内完成CLI设置,包括SDK追踪、API密钥和GitHub
生成经过实际生产故障测试的提示、配置和护栏修复
通过GitHub拉取请求展示A/B测试结果,便于合并验证过的更改
提供Python和JavaScript SDK以及HTTP API,支持LangChain、LangGraph、CrewAI和自定义堆栈
GitHub上的MIT许可证开源核心,拥有189+星标和活跃的问题追踪
持续检测超时、验证错误、响应不正确和性能退化
开源的MIT许可证代码库,您可以在产品上线前进行审计。
将监控、故障分析、修复生成和GitHub PR整合到一个工作流程中。
CLI 设置目标在五分钟内完成,内置 SDK 安装和仓库链接。
支持主要代理框架的Python、JavaScript、TypeScript和HTTP API集成。
针对真实生产故障测试修复,并在PR中包含A/B验证数据。
handit.ai的营销域名注册已过期,显示Namecheap的停车页面
无法访问公共定价页面;计划限制需在仪表盘确认
在此次丰富运行中,托管的仪表盘和文档子域名未能可靠获取
Handit.ai是免费使用的吗?
Handit.ai通过dashboard.handit.ai提供免费入门,核心项目在GitHub上以MIT许可证开源。Handit.ai的付费或按使用量计费层级未在已过期的handit.ai营销域名上列出,请查看仪表盘了解当前限制。
如何安装Handit.ai?
Handit.ai通过CLI安装,在您的代理项目中运行npx @handit/cli setup。Handit.ai流程连接您的账户,安装Python或JavaScript SDK,设置API密钥,并链接GitHub以实现自动拉取请求。
Handit.ai支持哪些编程语言?
Handit.ai在PyPI和npm上提供稳定的Python和JavaScript/TypeScript SDK。Go、Java、C#、Ruby和PHP团队可以通过HTTP API集成Handit.ai,包括LangChain、LangGraph、LlamaIndex和CrewAI工作流。
Handit.ai能检测哪些失败?
Handit.ai能检测幻觉、错误响应、模式和验证错误、PII泄露以及超时等性能问题。Handit.ai持续监控生产流量,并将这些失败作为生成修复的输入。
Handit.ai能与GitHub集成吗?
可以。Handit.ai在CLI安装过程中安装GitHub应用,并在有经过测试的修复时打开拉取请求。您可以审查并合并Handit.ai的PR,或者在团队启用该工作流时使用护栏进行受控自动部署。
Handit.ai是开源的吗?
是的。Handit.ai在GitHub的Handit-AI/handit.ai仓库中以MIT许可证开源。您可以审计Handit.ai代码、贡献代码,并在使用托管仪表盘监控的同时自托管部分堆栈。

