D’où viennent les biais
Les données de pré-entraînement
Le filtrage des données
L'alignement sur les préférences humaines
L'usage lui-même
Comment les biais se manifestent concrètement
Représentation et stéréotypes
Représentation et stéréotypes
Qualité inégale selon les langues
Qualité inégale selon les langues
Biais culturel implicite
Biais culturel implicite
Traitement différencié dans les décisions
Traitement différencié dans les décisions
Biais d'accessibilité et de style
Biais d'accessibilité et de style
Tester les biais de vos propres usages
Vous n’avez pas besoin d’être chercheur pour détecter les problèmes les plus courants. Le principe est simple : faire varier une seule caractéristique et comparer les sorties.Neutraliser en amont
Expliciter le critère
Garder l'humain décideur
Documenter et journaliser
Le travail invisible derrière les modèles
Les biais ne sont pas le seul enjeu social des données d’entraînement. Il y a aussi la question, longtemps passée sous silence, de qui produit et nettoie ces données. Derrière chaque modèle aligné se trouvent des dizaines de milliers de personnes qui annotent des images, transcrivent des enregistrements, classent des réponses par qualité, et surtout modèrent les contenus les plus violents pour qu’ils soient exclus des corpus ou filtrés en sortie. Ce travail est largement délocalisé : Kenya, Philippines, Inde, Madagascar, Colombie, entre autres.Les conditions documentées
Les conditions documentées
Une organisation collective qui émerge
Une organisation collective qui émerge
Ce que cela implique pour vous
Ce que cela implique pour vous
Ce qu’il faut retenir
- Les biais viennent des données, du filtrage, de l’alignement et de l’usage : quatre niveaux, quatre points d’action.
- Un biais devient un problème quand une description statistique se transforme en décision sur des personnes.
- Le test de substitution est simple, gratuit, et détecte l’essentiel des écarts grossiers. Répétez-le à chaque changement de modèle.
- Sur les décisions affectant des personnes : neutraliser en amont, expliciter les critères, garder l’humain décideur, tracer.
- Le travail d’annotation et de modération est un enjeu social de premier plan, à traiter comme un sujet de chaîne d’approvisionnement.
Testez vos connaissances
Quiz : Un modèle qui associe majoritairement « médecin » au masculin est-il forcément défaillant et à corriger en priorité ?
Quiz : Un modèle qui associe majoritairement « médecin » au masculin est-il forcément défaillant et à corriger en priorité ?