OpenAI est aujourd'hui la référence dans le secteur de l'intelligence artificielle. Son outil ChatGPT, dont GPT-4 est la version la plus à propos, fait donc logiquement figure de cible à abattre. D'ailleurs, la liste de ses challengers ne cesse de s'allonger. Google a récemment présenté son modèle d'IA baptisé Gemini, mais selon une étude menée par des chercheurs, ce dernier semble déjà totalement dépassé par le LLM de son rival GPT-4.
Un modèle d'intelligence artificielle multimodale
À ce jour, Gemini est le modèle de langage le plus avancé développé par Google. Pour refaire son retard sur OpenAI, la firme de Mountain View a développé un modèle d'IA multimodal. En d'autres termes, il est conçu pour être capable de progresser à l'analyse, au traitement et à la combinaison de plusieurs types d'informations comme les textes, les vidéos, etc.
Non seulement Gemini a donc la capacité de manipuler des contenus rédactionnels, mais il peut aussi saisir leur concept et leur contexte. Ce modèle d'IA se distingue dans la compréhension et la résolution de problèmes de mathématiques et de physique. Pour autant, bon nombre de spécialistes s'interrogent sur ses performances réelles par rapport à GPT-4.
#GEMINIAIhttps://t.co/s0lBGrpMWRhttps://t.co/42jcDHui8chttps://t.co/kgFcTVag1k
CA officielle : 0xB954562066c71b3E6e7b2ac330B03C74c0Dcd5AE pic.twitter.com/fMHtjLSdKG
– GÉMEAUX IA (@GEMINIAIToken) 6 décembre 2023
Une étude comparative à l'avantage du phénomène GPT-4
Avec la sortie de son intelligence artificielle, Google a voulu entrer en concurrence avec OpenAI sur le terrain des modèles de langage de grande taille ou LLM. Néanmoins, les résultats d'une étude récente ont été établis que GPT-4 surpasse la version la plus puissante de Gemini. Elle a été évoquée par l'Université Carnegie Mellon et l'entreprise BerriAI.
Pour aboutir à cette conclusion, l'équipe de chercheurs a effectué des tests sur quatre LLM. En plus de Gemini Proils ont testé GPT-3,5, GPT-4 Turbo et Mixtral 8x7B. L'étude comparative a été réalisée sur un site d'agrégateur d'intelligence artificielle appelé LiteLLM. Le modèle d'IA de Google fait mieux que Mixtral 8x7B, mais moins bien que les deux autres.
Des tests sur une large variété de domaines d'activité
Les quatre modèles d'IA ont été soumis à différents tests portant sur des domaines variés comme la programmation, le raisonnement, les sciences sociales, etc. Si Gemini Pro peut se targuer de performances comparables à GPT-3,5, il est largement plus faible que GPT-4 Turbo. Il présente par exemple des failles au niveau des requêtes complexes et des QCM.
En revanche, Gemini Pro est plus performant que GPT-3,5 sur quelques tâches spécifiques. Cela inclut par exemple la microéconomie, la sécurité et la traduction. Si OpenAI reste donc leader en matière d'IA générative, Google a réagi rapidement aux résultats de cette étude. La firme de Mountain View a annoncé la sortie en début 2024 de Gemini Ultra.
De son côté, la start-up dirigée par Sam Altman affiche une détermination sans faille à conserver son statut de leader dans ce domaine. Elle s'apprête notamment à réaliser une levée de fonds d'envergure, susceptible de propulser sa valorisation à la somme colossale de 100 milliards de dollars. Dans le même élan, OpenAI prévoit le lancement en 2024 de la nouvelle version de son grand modèle de langagele GPT-5.
