Vigilance

Qu’est-ce qu’un biais dans une IA ?

Un système d’IA peut favoriser, défavoriser ou représenter certains groupes de manière déséquilibrée. Le biais peut venir des données, des choix de conception ou de l’usage.

La définition simple

Un biais est une tendance systématique qui déforme un résultat.

Il ne s’agit pas seulement d’une erreur isolée : le même déséquilibre peut se répéter pour certaines personnes, situations ou façons de formuler une demande.

Exemple simple

Un outil entraîné surtout avec des CV provenant d’un même secteur, d’une même époque ou d’un même profil peut apprendre à favoriser ces caractéristiques. Même sans consigne discriminatoire, ses recommandations peuvent alors reproduire le déséquilibre des exemples passés.

D’où peut venir le biais ?

  • Des données : certains profils sont absents, rares ou représentés par des stéréotypes.
  • De l’objectif : le critère choisi pour « réussir » ne mesure pas toujours ce qui compte réellement.
  • Du contexte : un système conçu pour une situation peut être mal adapté à une autre.
  • De l’usage : une personne peut accorder trop de confiance au résultat ou ignorer ceux qui sont défavorisés.

Trois questions à se poser

  1. Qui est correctement représenté dans ce résultat — et qui semble oublié ?
  2. La même demande formulée avec un autre profil produit-elle une réponse différente sans raison valable ?
  3. Une personne compétente contrôle-t-elle les conséquences pour les personnes concernées ?
La règle en une phrase

Un résultat automatisé n’est pas neutre simplement parce qu’il est calculé.

Mots utiles

Trois termes pour aller plus loin

Sources consultées

Ces liens permettent de retrouver les documents de référence utilisés pour rédiger et vérifier cette fiche.

La suite conseillée

Voir les 66 contenus · Consulter le glossaire

Renforcer ses réflexes

Gardez le fil de votre apprentissage.

Une étape courte et clairement reliée à ce que vous venez de lire.