IA : L’étude de Sandrine Sénéchal et Josiane van Dorpe sur les biais d’associations explicites dans les discours du forum incels.is est rigoureuse et novatrice, mais elle n’échappe pas à certaines limites méthodologiques et interprétatives. Voici les principales critiques qu’on peut formuler :

1. Limites du modèle utilisé (Word2Vec)

• Les autrices utilisent **Word2Vec**, un modèle de plongement lexical statique. Or, ce type de modèle **attribue un seul vecteur par mot**, sans tenir compte du contexte d’usage.
• Cela peut **masquer des nuances sémantiques** importantes, surtout dans un corpus aussi sarcastique et codé que celui des incels.
Elles reconnaissent elles-mêmes que des modèles plus dynamiques (comme BERT) pourraient mieux capturer les subtilités du discours.

2. Faible performance aux tests standards

• Le modèle entraîné sur le corpus incels.is obtient un score de **0.38** au Google Analogy Test Set, ce qui est **très faible** pour un corpus de cette taille.
• Cela suggère que le modèle n’est pas optimal pour des tâches de similarité sémantique classiques, ce qui peut affecter la fiabilité des résultats du WEAT (Word Embedding Association Test).

3. Interprétation floue des biais implicites vs explicites

• L’étude cherche à distinguer les biais implicites (inconscients) des biais explicites (revendiqués), mais **les résultats ne permettent pas de trancher clairement** entre les deux.
• Par exemple, certains biais misogynes sont détectés, mais il est difficile de dire s’ils sont implicites ou explicitement revendiqués par les membres du forum.

4. Corpus très spécifique et homogène

• Le corpus est exclusivement composé de publications du forum incels.is, ce qui **limite la généralisation** des résultats à d’autres communautés ou contextes.
• Le corpus de comparaison (Reddit) est plus varié, mais les tests montrent des résultats similaires, ce qui **soulève des questions sur la spécificité réelle des biais détectés**.

5. Hypothèses interprétatives spéculatives

• Certaines interprétations, comme l’idée que les termes féminins standards seraient associés à des termes plaisants à cause d’un “biais implicite positif”, sont **intéressantes mais spéculatives**.
• Les autrices reconnaissent que le sarcasme omniprésent dans le forum pourrait fausser ces associations.

En résumé

L’étude est précieuse pour explorer les biais linguistiques dans les discours incels, mais elle gagnerait à :

• Utiliser des modèles contextuels plus récents
• Clarifier les distinctions entre types de biais
• Tester sur des corpus plus diversifiés
• Appuyer certaines hypothèses par des analyses qualitatives plus fines

Autres critiques ∴

... par un incel

• L'IA (en 2024) est capable d'affirmer que le site incels.eu est toxique, sans l'avoir parcouru !
  Source : As-tu parcouru le site incels.eu ?
  Sachant cela, quel crédit accorder à une étude antérieure à 2024, fondée sur l'IA ?

  Le document (cette étude) n'est pas daté !
  Mais, d'après l'URL, il aurait été publié en 2022.

• L'objet de l'analyse (contenu d'un forum) présuppose qu'il ne soit pas créé (partiellement ou non) par une IA.
  Risque d'intoxication d'une IA par une IA.

  Des incels savent aussi coder en Python.

• ... nous soutenons que nos résultats apportent des pistes intéressantes ... Conclusion, page 13, avant-dernière ligne.
  On n'est jamais aussi bien servi que par soi-même ...

• Une meilleure compréhension du discours, des néologismes et des biais des incels pourrait permettre de faciliter les communications avec eux et possiblement de désamorcer certaines situations ou de les encourager à aller cherche^(sic) de l’aide. Dernière ligne de la conclusion.

  pourrait permettre de [...] et possiblement [...]

  Les contribuables québecois doivent-ils payer pour des choses potentiellement utiles ?

• possiblement [...] les encourager à aller chercher de l’aide.
  La conclusion est sans lien avec l'étude !

• Qui a commandité cette étude ?
  Combien de temps a pris cette étude ?
  Quel est le coût de cette étude  ? (notamment, le salaire de ces deux universitaires sur cette période)
  L'étude est publiée au format PDF. Pourquoi ? Le format HTML n'aurait-il pas été préférable ?

• Une littérature plus massive — car subsidiée (pro-féministe) — qu'une litterature moindre — car non subsidiée (anti-féministe) — peut-elle influencer l'IA ? Bref, une IA peut-elle être influencée par une propagande ?

Observations

• Cette étude est réalisée par deux femmes.