mshumer/gpt-prompt-engineer - GitHub vs ZenPrompts

mshumer/gpt-prompt-engineer est une boîte à outils open source d'ingénierie des prompts qui génère, teste et classe des prompts candidats pour une tâche que vous définissez. Vous décrivez le cas d'utilisation, fournissez des cas de test, et les notebooks créent plusieurs variantes de prompts, les exécutent sur chaque cas de test, et trient les résultats avec un système de notation ELO commençant à 1200. Il est livré sous forme de notebooks Jupyter que vous pouvez exécuter dans Google Colab ou localement.

La plupart des outils de prompt vous aident à écrire un prompt à la fois. gpt-prompt-engineer traite la sélection de prompts comme un tournoi : des dizaines de candidats s'affrontent sur vos cas de test, et les scores ELO les plus élevés font ressortir les gagnants. Des notebooks séparés couvrent les tâches de classification, Claude 3 Opus avec des cas de test générés automatiquement, et la conversion Opus-to-Haiku pour une inférence moins coûteuse. Des journaux optionnels Weights & Biases et Portkey tracent chaque exécution.

Les ingénieurs en apprentissage machine, les ingénieurs en prompts et les développeurs en IA l'utilisent lorsqu'ils ont besoin d'un réglage reproductible des prompts plutôt que d'essais manuels et d'erreurs. Le dépôt compte 9,7 k étoiles GitHub et fonctionne avec vos propres clés d'API OpenAI ou Anthropic. Il est gratuit sous licence MIT.

ZenPrompts est une plate-forme de pointe conçue pour permettre aux ingénieurs d'invites de créer, d'affiner, de tester et de partager des invites sophistiquées pour divers modèles OpenAI. Cette plate-forme conviviale dispose d'un puissant éditeur d'invites qui facilite la comparaison des invites entre plusieurs modèles d'IA, garantissant ainsi la sélection de celui le plus approprié en fonction de la qualité, du coût et des performances. Le service, dont l'utilisation est gratuite pendant sa version bêta, fournit aux utilisateurs des outils précieux pour développer et présenter leur portefeuille rapide avec un design minimaliste qui met l'accent sur leur créativité.

Avec ZenPrompts, les utilisateurs peuvent expérimenter des invites sans craindre de perdre leurs travaux antérieurs, partager leurs inventions avec une communauté plus large et adopter la méthode DRY (Don't Repeat Yourself) pour une création efficace d'invites à l'aide de variables dynamiques. De plus, les utilisateurs ont la possibilité de documenter les invites avec des commentaires pour une meilleure organisation et préservation des informations sur le développement. L'objectif de la plateforme est d'améliorer les capacités des ingénieurs prompts et d'afficher leurs compétences à l'ère des grands modèles linguistiques et de l'IA.