Chinchilla vs ChatGPT Plugins

Chinchilla es un modelo avanzado de inteligencia artificial con 70 mil millones de parámetros, desarrollado para optimizar tanto el tamaño del modelo como el volumen de datos de entrenamiento para un aprendizaje eficiente. Fue entrenado utilizando la extraordinaria cantidad de 1,4 billones de tokens, con énfasis en escalar el modelo y los datos proporcionalmente. Este método de entrenamiento se basa en investigaciones que sugieren que el entrenamiento óptimo ocurre cuando el tamaño del modelo y los tokens de entrenamiento aumentan en conjunto. Chinchilla comparte su presupuesto de computación con otro modelo llamado Gopher, pero se distingue por aprovechar cuatro veces más datos de entrenamiento. A pesar de esta diferencia, ambos modelos están diseñados para funcionar con la misma cantidad de FLOP, lo que garantiza una utilización eficiente de los recursos informáticos. Chinchilla aprovecha MassiveText, un vasto conjunto de datos, y emplea una adaptación del tokenizador SentencePieza para interpretar y procesar datos. Para una comprensión detallada de su arquitectura y formación, se puede consultar el artículo que detalla estos aspectos.

Operai sigue una filosofía de implementación iterativa, y como parte de este enfoque, está lanzando gradualmente complementos para ChatGPT. El propósito de esta versión gradual es estudiar el uso del mundo real de los complementos, evaluar su impacto e identificar cualquier desafío de seguridad y alineación que pueda surgir. Obtener estos aspectos correctos es esencial para que Operai alcance su misión.

Desde el lanzamiento de ChatGPT, los usuarios han expresado interés en tener acceso a complementos, y muchos desarrolladores están experimentando con ideas similares. Inicialmente, Operai está implementando complementos a un pequeño conjunto de usuarios y planea aumentar gradualmente el acceso a medida que aprende más. Después de un período alfa, los usuarios de API que desean integrar complementos en sus productos también tendrán acceso. Operai está entusiasmado de construir una comunidad que ayude a dar forma al futuro del paradigma de interacción Human-AI.

Los desarrolladores que han sido invitados fuera de la lista de espera pueden usar la documentación de OpenAI para crear un complemento para ChatGPT. Una vez que se crea el complemento, se enumera en el mensaje que se muestra al modelo de idioma, junto con la documentación que instruye al modelo sobre cómo usar cada uno. El primer conjunto de complementos ha sido creado por Expedia, Fiscalnote, Instacart, Kayak, Klarna, Milo, OpenTable, Shopify, Slack, Speak, Wolfram y Zapier.