Handit.ai
Handit.ai 是一个开源的生产AI代理可靠性层。它全天候监控实时流量,识别诸如幻觉、架构断裂和PII泄露等故障,然后起草修复方案,在真实故障案例中测试,并在合并前提交你可以审查的GitHub pull request。
该项目专为使用JavaScript、TypeScript或Python开发代理的团队设计,旨在提供与实际修复流程相结合的监控功能。设置从Handit CLI开始,它会安装SDK,连接你的仓库,并将追踪数据流式传输到仪表盘,让你无需手动配置即可查看质量分数和代理性能。
Handit无需在凌晨2点呼叫工程师猜测代理为何出现回退,它将检测、根因分析、验证和部署整合到一个循环中。它通过SDK或HTTP API支持LangChain、LangGraph及其他技术栈,核心代码采用MIT许可证,你可以检索在生产中运行的内容。
实时监控每个代理请求,标记幻觉、架构中断和个人身份信息泄露
运行
npx @handit/cli setup,在五分钟内完成 SDK 跟踪、API 密钥和 GitHub 的连接生成提示、配置和护栏修复方案,经过真实生产故障测试
打开带有 A/B 测试结果的 GitHub 拉取请求,便于合并经过验证的更改
提供适用于 LangChain、LangGraph、CrewAI 及自定义堆栈的 Python 和 JavaScript SDK 以及 HTTP API
开源的MIT许可证代码库,您可以在产品上线前进行审计。
将监控、故障分析、修复生成和GitHub PR整合到一个工作流程中。
CLI 设置目标在五分钟内完成,内置 SDK 安装和仓库链接。
支持主要代理框架的Python、JavaScript、TypeScript和HTTP API集成。
针对真实生产故障测试修复,并在PR中包含A/B验证数据。
handit.ai 营销域名当前解析到一个已过期的停放页面,因此公共网站无法访问。
研究期间无法访问公共定价页面;计划限制必须在仪表板中确认。
在运行期间,托管的文档和仪表板子域名无法从此环境获取。
Handit.ai 是免费使用的吗?
Handit.ai 通过 dashboard.handit.ai 提供免费入门方式,核心项目在 GitHub 上以 MIT 许可证开源。付费或基于使用的计划未在已过期的 handit.ai 营销网站上登记,请查看仪表板了解当前限制。
如何安装 Handit.ai?
在您的代理项目中通过 CLI 使用命令 `npx @handit/cli setup` 安装 Handit.ai。该流程会连接您的 Handit 账户,安装 Python 或 JavaScript SDK,设置您的 API 密钥,并链接 GitHub 以实现自动化拉取请求。
Handit.ai 支持哪些编程语言?
Handit.ai 提供稳定的 Python 和 JavaScript/TypeScript SDK(PyPI 上为 `handit-ai`,npm 上为 `@handit.ai/handit-ai`)。Go、Java、C#、Ruby 和 PHP 团队可以通过 HTTP API 集成,包括 LangChain、LangGraph、LlamaIndex 和 CrewAI 工作流。
Handit.ai 能检测哪些类型的 AI 失效?
Handit.ai 能检测幻觉、错误回答、模式和验证错误、个人身份信息(PII)泄露,以及性能问题如超时。它持续监控生产流量,并将这些失效作为生成修复的输入。
Handit.ai 是否集成了 GitHub?
是的。Handit.ai 在 CLI 安装过程中会安装一个 GitHub 应用,当有经过测试的修复时会自动发起拉取请求。您可以审查并合并该 PR,或者当团队启用相关工作流时,使用防护措施实现受控的自动部署。
Handit.ai 是开源的吗?
是的。Handit.ai 在 GitHub 上的 Handit-AI/handit.ai 仓库以 MIT 许可证开源。您可以审查代码、贡献代码,并自托管堆栈的部分组件,同时使用托管仪表板进行监控。

