A Generalist Agent vs AI Awesome

Gato est l'agent généraliste présenté par DeepMind dans son article de recherche de mai 2022 intitulé « A Generalist Agent ». Une seule politique de transformeur avec des poids partagés gère la conversation, la description d'images, les jeux Atari et l'empilement de blocs par un bras robotique réel à partir du même modèle. L'article le décrit comme une politique multimodale, multitâche et multi-incarnation qui choisit d'émettre du texte, des couples articulaires, des pressions de boutons ou d'autres jetons selon le contexte.

La plupart des outils dans ce domaine entraînent un modèle distinct par domaine de tâche. Gato sérialise au contraire chaque modalité et environnement en une séquence plate de jetons et la fait passer à travers un transformeur conçu comme un grand modèle de langage. Cela signifie qu'un seul point de contrôle pré-entraîné passe du dialogue, à la vision, puis au contrôle sans changer d'architecture.

Pendant l'entraînement, les données issues d'environnements simulés et réels se mélangent avec des ensembles de données en langage naturel et d'images, avec une perte masquée pour que Gato ne prévoie que les cibles d'action et de texte. Lors du déploiement, un prompt est d'abord tokenisé, chaque nouvelle observation s'ajoute à la séquence, et le modèle échantillonne un vecteur d'action un jeton à la fois dans une fenêtre de contexte de 1024 jetons. Le blog inclut des graphiques regroupés par domaine des tâches où le modèle pré-entraîné dépasse les seuils de score expert.

Le texte s'adresse davantage aux chercheurs en IA et robotique qu'aux acheteurs de logiciels quotidiens. Vous pouvez lire et citer la recherche sur deepmind.google ; il n'y a pas de processus d'inscription public, de niveau API ou de bouton de téléchargement sur les pages examinées ici.

AI Awesome est une plateforme tout-en-un pour découvrir des outils d'IA, des offres d'emploi et des projets de créateurs. L'annuaire répertorie 1 570 produits dans des catégories telles que chatbots, rédaction, retouche photo et no-code, avec de nouveaux outils ajoutés quotidiennement. Vous pouvez parcourir les meilleures et les plus récentes annonces, rechercher par catégorie et suivre une newsletter qui promet des actualités sur l'IA en trois minutes ou moins.

La plupart des annuaires d'IA ne cataloguent que des outils. AI Awesome gère également un tableau d'offres d'emploi en IA avec des filtres pour l'ingénierie, le marketing et les LLM, ainsi que des soumissions de projets HustleGPT et des emplacements sponsorisés pour les créateurs souhaitant une visibilité. Ce mélange transforme un site de découverte en un petit hub communautaire plutôt qu'une liste statique.

Les fondateurs de startups à la recherche d'outils, les créateurs indépendants comparant les lancements, et les chercheurs d'emploi cherchant des postes en IA utilisent AI Awesome pour découvrir les nouveautés sans passer d'un tableau d'offres à un annuaire séparé. Les soumissions de produits se font via un Typeform, et les sponsors peuvent faire de la publicité auprès de l'audience de la newsletter suivie par des équipes d'OpenAI, Google, a16z, Microsoft et Sequoia.