mshumer/gpt-prompt-engineer - GitHub vs ZenPrompts

mshumer/gpt-prompt-engineer es un kit de herramientas de ingeniería de prompts de código abierto que genera, prueba y clasifica prompts candidatos para una tarea que definas. Describes el caso de uso, proporcionas casos de prueba, y los cuadernos de Jupyter crean múltiples variantes de prompts, los ejecutan contra cada caso de prueba, y ordenan los resultados con un sistema de puntuación ELO que comienza en 1200. Se distribuye como cuadernos de Jupyter que puedes ejecutar en Google Colab o localmente.

La mayoría de las herramientas de prompts te ayudan a escribir un prompt a la vez. gpt-prompt-engineer trata la selección de prompts como un torneo: docenas de candidatos compiten en tus casos de prueba, y las puntuaciones ELO más altas revelan a los ganadores. Cuadernos separados cubren tareas de clasificación, Claude 3 Opus con casos de prueba generados automáticamente, y conversión de Opus a Haiku para inferencia más económica. El registro opcional con Weights & Biases y Portkey rastrea cada ejecución.

Los ingenieros de ML, ingenieros de prompts y desarrolladores de IA lo utilizan cuando necesitan ajustes reproducibles de prompts en lugar de prueba y error manual. El repositorio tiene 9.7k estrellas en GitHub y funciona con tus propias claves de API de OpenAI o Anthropic. Es gratuito bajo la licencia MIT.

ZenPrompts es una plataforma de vanguardia diseñada para capacitar a los ingenieros de avisos en la creación, el refinamiento, la prueba y el intercambio de avisos sofisticados para varios modelos OpenAI. Esta plataforma fácil de usar cuenta con un potente editor de mensajes que simplifica la comparación de mensajes entre múltiples modelos de IA, lo que garantiza la selección del más adecuado en función de la calidad, el costo y el rendimiento. El servicio, que es de uso gratuito durante su versión beta, proporciona herramientas valiosas para que los usuarios desarrollen y muestren su cartera de proyectos con un diseño minimalista que enfatiza su creatividad.

Con ZenPrompts, los usuarios pueden experimentar con indicaciones sin preocuparse de perder trabajos anteriores, compartir sus inventos con una comunidad más amplia y adoptar el método DRY (Don't Repite Yourself) para una creación eficiente de indicaciones utilizando variables dinámicas. Además, los usuarios tienen la opción de documentar indicaciones con comentarios para una mejor organización y preservación de los conocimientos sobre el desarrollo. El objetivo de la plataforma es mejorar las capacidades de los ingenieros rápidos y mostrar sus habilidades en la era de los grandes modelos de lenguaje y la IA.