Llama 2 vs ChatGPT Plugins

La prochaine génération de notre grand modèle de langage open source

Cette version inclut les poids des modèles et le code de démarrage pour les modèles de langage Lama pré-entraînés et affinés, allant des paramètres 7B à 70B.

Llama 2 a été formé avec 40 % de données en plus que Llama 1 et a une longueur de contexte deux fois supérieure.

Formation Llama-2-chat : Llama 2 est pré-entraîné à l'aide de données en ligne accessibles au public. Une première version de Llama-2-chat est ensuite créée grâce à des réglages fins supervisés. Ensuite, Llama-2-chat est affiné de manière itérative à l'aide de l'apprentissage par renforcement à partir de la rétroaction humaine (RLHF), qui comprend l'échantillonnage de rejet et l'optimisation des politiques proximales (PPO).

Meta et Microsoft se sont associés pour dévoiler Llama 2, le successeur open source de leur grand modèle de langage largement utilisé, Llama. Ce modèle révolutionnaire est conçu pour améliorer les capacités de l’IA, en la proposant gratuitement à la fois pour la recherche et pour un usage commercial. Reconnu comme partenaire privilégié, Microsoft intègre Llama 2 dans son catalogue de modèles Azure AI, offrant aux développeurs des outils cloud natifs robustes et une optimisation pour les plateformes Windows.

Llama 2 est également accessible via d'autres fournisseurs majeurs comme AWS et Hugging Face. Dédiés à l'innovation responsable en matière d'IA, Meta et Microsoft mettent l'accent sur la transparence et le développement axé sur la communauté avec des ressources telles que des exercices d'équipe rouge, un schéma de transparence et un guide d'utilisation responsable. Des initiatives collaboratives telles que l'Open Innovation AI Research Community et le Llama Impact Challenge font également partie du déploiement, visant à stimuler des applications responsables de Llama 2 dans divers secteurs.

OpenAI suit une philosophie de déploiement itérative, et dans le cadre de cette approche, il publie progressivement des plugins pour Chatgpt. Le but de cette version progressive est d'étudier l'utilisation réelle des plugins, d'évaluer leur impact et d'identifier les défis de sécurité et d'alignement qui peuvent survenir. Il est essentiel d'obtenir ces aspects pour que OpenAI réalise sa mission.

Depuis le lancement de Chatgpt, les utilisateurs ont exprimé leur intérêt à avoir accès aux plugins, et de nombreux développeurs expérimentent des idées similaires. OpenAI déploie initialement des plugins à un petit ensemble d'utilisateurs et prévoit d'augmenter progressivement l'accès à mesure qu'il en apprend davantage. Après une période alpha, les utilisateurs d'API qui souhaitent intégrer les plugins dans leurs produits auront également accès. Openai est ravi de construire une communauté qui aidera à façonner l'avenir du paradigme d'interaction humaine-AI.

Les développeurs qui ont été invités sur la liste d'attente peuvent utiliser la documentation d'Openai pour construire un plugin pour chatgpt. Une fois le plugin créé, il est répertorié dans l'invite indiquée dans le modèle de langue, ainsi qu'une documentation qui instruit le modèle sur la façon d'utiliser chacun. Le premier ensemble de plugins a été créé par Expedia, FiscalNote, Instacart, Kayak, Klarna, Milo, Openntable, Shopify, Slack, Speak, Wolfram et Zapier.