Compar:IA vise avant tout à sensibiliser le public, en particulier les jeunes, aux enjeux et subtilités de l’intelligence artificielle. La plateforme permet d’interagir avec plusieurs modèles d’IA et de voter pour la réponse la plus pertinente. En confrontant ces modèles, les utilisateurs prennent conscience des écarts de qualité et des erreurs potentielles.
En octobre 2024, à travers le ministère de la Culture et la Direction interministérielle du numérique, l’État français a lancé Compar:IA. Cette plateforme est dédiée à la comparaison anonyme des réponses de diverses IA génératives. Grâce à cet outil gratuit, les utilisateurs peuvent opposer deux modèles de langage en leur posant la même question en français.
Les réponses sont données de manière anonyme dans le but d’éviter tout biais et d’évaluer impartialement la pertinence des contenus générés. Parmi les modèles disponibles, on retrouve Gemini 1.5 Pro, GPT-4o et DeepSeek v3, ainsi que des alternatives développées en France par Mistral ou encore par des entreprises chinoises comme Alibaba.
Une plateforme pour tester et comparer les IA
En accédant à la plateforme Compar:IA, l’utilisateur doit d’abord accepter les conditions d’utilisation, puis choisir deux modèles d’IA à comparer. Une sélection aléatoire peut également être proposée. Il est possible de :
- Privilégier des IA à faible consommation énergétique ; ou
- Comparer une IA aux capacités limitées avec un modèle avancé.
Suite à la sélection des modèles, l’utilisateur pose une question ou utilise un prompt pré-généré par la plateforme. Il peut ensuite analyser les réponses fournies, les comparer et voter pour celle qu’il juge la plus pertinente.
Intuitive, l’usage de la plateforme s’adapte à tous les niveaux de curiosité. Outre la comparaison des modèles, l’utilisateur a la possibilité de référer à des prompts proposés ou affiner les questions tout au long de la conversation. Dans le cas où les réponses semblent insatisfaisantes, il suffit de demander une reformulation avant de choisir.
La plateforme met aussi à disposition une FAQ détaillée, présentant les bases de l’IA, ses usages, ses limites et son influence environnementale. Cela permet notamment aux personnes qui souhaitent mieux comprendre les enjeux liés à l’IA.
Au-delà de l’évaluation qualitative, Compar:IA occupe une place importante dans l’évolution des modèles en français. Chaque vote et retour utilisateur servent à améliorer les jeux de données permettant d’entraîner ces IA.
À travers cette approche, la plateforme ne se limite pas à un simple outil d’évaluation. Il est envisageable qu’elle s’impose comme un véritable comparatif des performances des modèles d’IA, identifiant les plus pertinents pour divers usages.
La sensibilisation des utilisateurs concernant l’impact énergétique des IA
Compar:IA intègre un volet dédié à l’empreinte énergétique des modèles de langage. Après les tests, l’utilisateur peut consulter la quantité d’énergie consommée [wattheures (Wh)] et en équivalents concrets, comme :
- Le temps d’utilisation d’une ampoule LED ;
- La durée de visionnage d’une vidéo en ligne.
Une réponse de quelques centaines de mots peut nécessiter 12 Wh (soit environ 14 minutes de streaming sur YouTube). Par contre, certains modèles performants peuvent atteindre l’équivalent de 40 minutes pour une seule requête. Cette fonctionnalité permet de
- Sensibiliser les personnes sur l’impact environnemental de l’IA ;
- Encourager le recours à des modèles économes.
Compar:IA affiche des indicateurs écologiques, se basant sur une méthodologie d’Ecologits. Cela prend en compte l’empreinte de fabrication des cartes graphiques pour le fonctionnement des modèles et l’énergie nécessaire pour leur inférence.
Malgré ses avantages, la plateforme a certaines limites. Certains modèles testés ne sont pas connectés à Internet, mais fonctionnent uniquement sur des bases de données statiques. Cela les empêche de fournir des informations ou de citer leurs sources.
Cette contrainte illustre l’importance de croiser les réponses reçues avec des sources fiables externes. Par contre, Compar:IA participe au développement d’une IA adaptée aux besoins des utilisateurs et à l’éducation digitale. En offrant un comparatif détaillé des performances et de l’impact environnemental des modèles, elle aide l’utilisateur à choisir selon ses besoins et ses préoccupations énergétiques.