Compar:IA

Description

Compar:IA est un comparateur d'IA conversationnelles (une "chatbot arena") développé au sein du Ministère de la Culture avec une double mission :

  • Former et sensibiliser au pluralisme des modèles, aux biais culturels et linguistiques et aux enjeux environnementaux des IA conversationnelles.
  • Constituer et publier des jeux de données de questions et de préférences utiles à des fins d'observation des usages et d'amélioration des IA conversationnelles en français.

Le comparateur compar:IA est développé dans le cadre de la start-up d'Etat compar:IA (incubateur de l'Atelier numérique et AllIAnce) intégrée au programme beta.gouv.fr de la Direction interministérielle du numérique (DINUM) qui aide les administrations publiques à construire des services numériques utiles, simples et faciles à utiliser.

Lien vers l'arène: comparia.beta.gouv.fr

Lien vers le dépôt Github du projet: https://github.com/betagouv/ComparIA

Pour en savoir plus: https://www.comparia.beta.gouv.fr/a-propos

Les données collectées via compar:IA sont publiés dans trois jeux de données :

  • Conversations compar:IA : Jeu de données de l'ensemble des questions posées et réponses reçues sur la plateforme compar:IA.
  • Votes compar:IA : Jeu de données regroupant les préférences exprimées par les utilisateurs après une conversation entière. Les votes permettent de comparer deux modèles lorsqu'aucune réaction n'a été donnée sur des messages individuels.
  • Réactions compar:IA : Jeu de données regroupant les réactions des utilisateurs de compar:IA à l'échelle d'un message. Il reflète les préférences exprimées au fil des discussions, message par message. 
Dernière mise à jour
  • Fréquence de mise à jour non respectée

  • Couverture temporelle non renseignée

1 API
Mis à jour
111793 vues25 abonnés

L'API des données tabulaires de data.gouv.fr Présentation L'API tabulaire est une API REST permettant de requêter par API l'ensemble des données tabulaires référencées sur la plateforme data.gouv.fr. Elle permet de récupérer la description générale ainsi que l'ensemble du contenu de la donnée au f…

13 réutilisations
L'impact environnemental de l'IA générative
charlotte mettetal
Publié
218 vues0 abonnés

Quelle quantité d’énergie consomme réellement une réponse d’IA ? Faute d’ordre de grandeur, le débat public oscille entre des chiffres spectaculaires et l’idée d’un service immatériel. Ce site remet les unités à plat en comparant la consommation d’une réponse d’IA à celle d’appareils du quotidien. …

Coûts des demandes en Wh/Tokens avec l'IA
Geiss Solène
Publié
216 vues0 abonnés

Réutilisation du jeu Compar:IA du ministère de la Culture : à partir de 384 953 conversations en français, ce site compare, pour un même type de demande, les tokens produits et l’électricité estimée pour 1 000 tokens selon la taille du modèle.

Le Vrai Côut de l’IA Générative
Adam GOSMAT
Publié
220 vues0 abonnés

Une conversation avec une IA donne l’impression de se dérouler dans l’air : on tape une question, une réponse s’affiche, et rien ne semble avoir bougé. En réalité, chaque échange est calculé dans un datacenter, un bâtiment rempli de serveurs qui consomment de l’électricité et qu’il faut refroidir en…

Comprendre l'électricité de l'IA
Bambou Franceschini
Publié
208 vues0 abonnés

Site d’enquête en 4 temps qui compare l’électricité mesurée en laboratoire (AI Energy Score) et estimée sur de vraies conversations (Compar:IA), pour apprendre à lire les chiffres sur la consommation de l’IA. Réalisé avec Astro et Observable Plot dans le cadre de la SAÉ 303 (BUT MMI, Open Data Unive…

Le poids de l'IA
Izya Thiriet
Publié
210 vues0 abonnés

Site réalisé dans le cadre de la SAÉ 303 (MMI Montbéliard) pour le défi de l’ADEME sur l’impact environnemental de l’IA générative. Il compare l’empreinte carbone d’une conversation avec une IA à des gestes du quotidien, en 4 temps : où sont les centres de données en France (OpenStreetMap), combien …

Sans filtre — peut-on vérifier les promesses climatiques de l’IA ?
Noemie Caritey
Publié
216 vues0 abonnés

Sans filtre est un site d’enquête réalisé en BUT MMI (IUT Nord Franche-Comté). Il compare ce qu’OpenAI, Google et Mistral promettent sur le climat, les chiffres qu’ils publient et ce que ces chiffres permettent de vérifier. Le site s’appuie notamment sur les estimations de consommation de Compar:IA …