Última actualización 07-29-2026
Categoría:
Reviews:
Join thousands of AI enthusiasts in the World of AI!
bottest.ai
Bottest registra conversaciones en vivo de chatbots mediante una extensión de Chrome, las reproduce como pruebas automatizadas y evalúa las respuestas nuevas comparándolas con líneas base guardadas. Está dirigido a equipos que lanzan chatbots LLM y necesitan verificaciones de regresión que toleren respuestas variables, no scripts rígidos de aprobado o reprobado. La extensión captura interacciones de página completa, por lo que las pruebas pueden cubrir widgets y flujos fuera de una caja de chat simple.
La reproducción al estilo Selenium falla cuando las respuestas cambian entre ejecuciones. Bottest ejecuta un evaluador LLM que compara las respuestas semánticamente contra una o más líneas base, soporta múltiples iteraciones por prueba para verificaciones de consistencia y genera automáticamente variantes de frases para ampliar la cobertura. Los conjuntos adversariales preempaquetados siguen investigaciones publicadas sobre jailbreak, y la plataforma es de código abierto con despliegue Docker Compose para que los datos permanezcan en sus servidores.
Desarrolladores de chatbots, ingenieros de QA y equipos de producto en startups de IA lo usan después de cada indicación o cambio de modelo. El panel rastrea tasas de aprobación, distribuciones de tiempo de respuesta y causas raíz de fallos, con análisis que estiman un ahorro de tiempo en revisión manual de 2 minutos por evaluación y 10 minutos por ejecución de conjunto.
La extensión de Chrome registra interacciones completas de la página durante conversaciones en vivo con chatbots, no solo indicaciones de texto
El evaluador LLM puntúa respuestas contra múltiples líneas base cuando existen varias respuestas válidas
Docker Compose despliega PostgreSQL, Redis, API backend, panel de control y trabajador Puppeteer en un solo comando
Trae tus propias claves API para cargas de trabajo de evaluación de OpenAI, Anthropic, DeepSeek o Gemini
Genera automáticamente variantes de frases por prueba para que un mismo intento se verifique con diferentes formulaciones del usuario
Conjuntos de pruebas adversariales preempaquetados basados en la investigación de jailbreak arXiv 2307.02483
Las analíticas estiman 2 minutos ahorrados por evaluación y 10 minutos por ejecución de suite en comparación con revisión manual
Gratis y de código abierto con alojamiento completo mediante Docker Compose.
La evaluación semántica LLM maneja respuestas variables del chatbot que las herramientas tradicionales de reproducción no detectan.
La extensión de Chrome captura interacciones complejas de la interfaz de usuario más allá de mensajes de chat simples.
Múltiples líneas base y variantes generadas automáticamente amplían la cobertura de regresión.
Los conjuntos adversariales preempaquetados apuntan a jailbreak y vulnerabilidades de seguridad.
Requiere infraestructura autohospedada y mantenimiento continuo, no es un SaaS gestionado.
Proporcionas tus propias claves API de LLM para cargas de trabajo de evaluación.
Algunas campañas de marketing de pruebas adversariales están marcadas como próximamente en el sitio.
La configuración del trabajador Puppeteer añade carga operativa en comparación con herramientas SaaS ligeras de control de calidad.
¿bottest.ai es gratis?
Sí, bottest.ai es gratuito y de código abierto. Lo alojas tú mismo con Docker Compose en tu propia infraestructura, y el sitio no ofrece planes de suscripción pagados. Debes proporcionar tus propias claves API de LLM para las cargas de trabajo de evaluación.
¿Cómo evalúa bottest.ai las respuestas del chatbot?
bottest.ai reproduce las indicaciones grabadas y usa un evaluador LLM para comparar cada nueva respuesta semánticamente con las líneas base guardadas. Una prueba pasa cuando la respuesta coincide con al menos una línea base, lo que permite manejar respuestas válidas de LLM que no son idénticas.
¿Qué necesita bottest.ai para funcionar?
bottest.ai funciona mediante Docker Compose con PostgreSQL, Redis, una API backend, un panel frontend y un trabajador Puppeteer. Un solo comando `docker-compose up` inicia la pila, y los volúmenes persistentes mantienen los datos de la base de datos y caché en tus servidores.
¿Qué proveedores de LLM soporta bottest.ai?
bottest.ai te permite usar tus propias claves API para OpenAI, Anthropic, DeepSeek y Gemini. Esas claves alimentan el evaluador LLM que puntúa las respuestas del chatbot durante las pruebas y evaluaciones de suites.
¿Puede bottest.ai probar más allá del texto del chat?
Sí. La extensión de Chrome de bottest.ai graba interacciones en toda la página web mientras hablas con el chatbot, no solo los mensajes de chat. Esto permite que las pruebas reproduzcan flujos complejos de la interfaz fuera de un simple widget de chat.
¿Incluye bottest.ai pruebas de seguridad?
bottest.ai incluye suites de pruebas adversariales preempaquetadas basadas en la investigación de jailbreak arXiv 2307.02483. Estas prueban inyección de prefijos, supresión de rechazos, indicaciones de juego de roles y ataques de ofuscación antes de que lances a producción.
¿Cómo se despliega bottest.ai?
bottest.ai se despliega con Docker Compose usando un solo comando `docker-compose up`. PostgreSQL y Redis se ejecutan en contenedores junto con la API, el panel y el trabajador Puppeteer, por lo que todos los datos de prueba permanecen en la infraestructura que controlas.