← Retour Accueil

Fiche Élève

Le choc des modèles : Apprendre à évaluer l'IA
🎯 Objectif
Développer son esprit critique, évaluer la qualité d'une réponse IA et prendre conscience du coût écologique des différents modèles.
🛠️ Outils
Compar:IA (et optionnellement Arena.ai).

1. Préparation du Combat (Test à l'aveugle)

Toutes les intelligences artificielles ne se valent pas. Certaines sont très puissantes, d'autres sont économes. Nous allons les faire s'affronter sans savoir qui est qui !

⚔️ Lancer le duel
  1. Posez une question dont vous connaissez la réponse (un point de cours, une devinette, une règle de sport, etc.) pour être capable de juger l'IA.
  2. Dans le menu déroulant en bas, choisissez le mode de combat. Nous vous conseillons "David contre Goliath" (un modèle frugal face à un mastodonte).
  3. Cliquez sur Envoyer et attendez que les deux réponses se génèrent. Surtout, ne dévoilez pas encore les modèles !

2. L'Arbitrage : Quelle est la meilleure réponse ?

Lisez attentivement les deux textes produits. Il faut maintenant décider lequel a gagné selon des critères précis.

Critères d'évaluation Modèle A Modèle B
Clarté : La réponse est-elle facile à comprendre ?
Exactitude : L'IA a-t-elle fait des erreurs (hallucinations) ?
Complétude : Ne manque-t-il rien d'important ?
Présentation : Le texte est-il aéré, agréable à lire (puces, gras) ?
🏆 Verdict : Lequel choisissez-vous et pourquoi ?

3. Le Dévoilement (Qui se cache derrière l'écran ?)

Il est temps de lever le voile ! Cliquez sur le bouton pour révéler l'identité des modèles qui ont généré les réponses.

📖 Le saviez-vous ? Open Source vs Semi-Ouvert vs Propriétaire
  • Modèle Open Source (Ouvert) : Le "code" et la recette complète de l'IA sont entièrement publics. N'importe quel chercheur peut inspecter l'architecture, voir les données d'entraînement exactes et modifier le modèle librement.
  • Modèle Semi-Ouvert : L'entreprise partage le modèle final (ses "neurones" et ses capacités) pour que chacun puisse l'exécuter chez soi ou le personnaliser. En revanche, la recette précise (les données d'entraînement exactes et le coût de fabrication) reste secrète ou soumise à des restrictions commerciales (ex: Llama de Meta, Mistral).
  • Modèle Propriétaire (Fermé) : La recette et le modèle sont totalement secrets, enfermés sur les serveurs d'une entreprise privée. On ne peut l'utiliser que via une interface ou une clé d'accès (API), souvent payante (ex: ChatGPT d'OpenAI, Claude d'Anthropic).
Informations Modèle A Modèle B
Nom du modèle
Entreprise
Type
Taille du modèle

4. Le Poids Écologique

Regardez les données affichées concernant les Tokens (jetons) utilisés et la Consommation énergétique (souvent exprimée en mg ou g de CO2).

Bilan du Modèle A Bilan du Modèle B
Tokens : Tokens :
CO2 émis (en tonnes) : CO2 émis (en tonnes) :
🌍 Mise en perspective des émissions :

Pour vous donner un ordre d'idée de la pollution engendrée, l'ensemble de la population française émet collectivement environ 19 tonnes de CO2 par seconde. À titre de comparaison, si tous les Français (68 millions) envoyaient un simple e-mail au même instant, cela générerait environ 27,2 tonnes de CO2. Comparez ces chiffres avec la consommation du prompt généré par l'IA !

5. Prendre de la hauteur : Les Classements

Vous n'êtes pas seul(e) à juger ces modèles ! Cliquez sur l'onglet Classement sur le site Compar:IA pour voir l'avis général.

📊 Observez le classement et l'énergie :

Depuis l'onglet Classement, en triant les résultats par différentes colonnes (consommation moyenne, score de satisfaction), trouvez :


Cliquez ensuite sur l'onglet Focus Énergie (à côté de Classement). Observez le nuage de points et filtrez pour n'afficher que les modèles les plus frugaux (consommation inférieure à 150 mWh). Parmi eux, citez 2 modèles ayant le score de satisfaction le plus haut, issus de compagnies différentes :

🌐 Bonus : L'Arène Mondiale (Arena AI)

Si vous voulez voir un classement mondial actualisé en temps réel, visitez le site international Arena AI. Naviguez dans les onglets (Chat / Image) pour trouver les champions actuels !

💡 Ce qu'il faut retenir

  • ⚖️
    Esprit critique avant tout : Une IA n'a pas toujours raison et sa présentation peut varier. Il est indispensable d'évaluer ses réponses (clarté, exactitude, complétude).
  • 🔓
    Les familles de modèles : Le monde de l'IA est divisé entre les modèles Open Source (code libre et accessible, à privilégier d'après le code de l'IA en éducation) et les modèles Propriétaires (recette secrète et fermée).
  • 🌍
    L'effet de masse : Générer une réponse demande beaucoup plus de calculs (et donc de CO2) qu'une simple recherche sur internet. Multiplié par des millions d'utilisateurs, cet impact écologique devient gigantesque, bien qu'il reste invisible et difficile à visualiser au quotidien.
  • 🔋
    Sobriété numérique (Le choix frugal) : Un modèle léger ("David") peut souvent offrir un excellent niveau de satisfaction tout en consommant drastiquement moins d'énergie qu'un mastodonte ("Goliath").
  • 🏆
    À chaque tâche son champion : Il n'y a pas de "meilleure" IA absolue. Le numéro 1 mondial varie selon le contexte d'utilisation (Génération de texte, Création d'images, Recherche web ou Programmation).