La Californie admet que l'IA a été utilisée pour rédiger un examen du barreau en proie à des problèmes
infohightech ·
Voici maintenant un rebondissement digne d'un drame juridique dans la récente vague d' avocats stupides surpris en train d'utiliser l'IA : il s'avère que l'examen du barreau administré aux aspirants avocats en Californie a lui-même été créé avec l'aide d'un grand modèle de langage, rapporte le Los Angeles Times .
L'aveu a été fait lundi par le Barreau de l'État de Californie, à la suite de plaintes concernant la qualité des questions du test et de nombreux problèmes rencontrés par les candidats lors de son passage en février.
Dans un communiqué de presse , l'organisation a indiqué que 23 des 171 questions à choix multiples notées de l'examen ont été rédigées par la société ACS Ventures, qui a développé les questions « avec l'aide de l'IA ». Quarante-huit autres questions ont été reprises d'une ancienne version d'un examen destiné aux étudiants de première année de droit.
« Le fiasco de l'examen du barreau de février 2025 est pire que ce que nous imaginions », a déclaré Mary Basick, doyenne adjointe chargée des compétences académiques à la faculté de droit de l'UC Irvine, au LA Times . « Je suis presque sans voix. Voir les questions rédigées par des non-juristes grâce à l'intelligence artificielle est tout simplement incroyable. »
Katie Moran, professeure associée à la faculté de droit de l'Université de San Francisco, a qualifié cet aveu d'« ahurissant ». La même entreprise qui a utilisé l'IA pour rédiger les questions a ensuite été payée « pour évaluer et finalement approuver les questions de l'examen, y compris celles qu'elle avait rédigées », a-t-elle indiqué au journal.
Pendant des semaines, les candidats se sont plaints d'être expulsés de manière aléatoire de la plateforme en ligne où se déroulait l'examen, tandis que les écrans étaient lents et affichaient des messages d'erreur, selon les rapports. Le test lui-même était truffé de fautes de frappe et certaines questions étaient totalement absurdes.
Malgré ces plaintes — et malgré le fait qu'il ait plaidé coupable d'utilisation de l'IA — un porte-parole du Barreau de l'État a insisté sur le fait que les questions du test avaient été examinées par des panels de validation de contenu et des experts en la matière.
Quoi qu'il en soit, la situation dans son ensemble ressemble à une catastrophe mortifiante. D'une part, la Cour suprême de Californie, dont le Barreau est l'organe administratif, maintient qu'elle n'avait aucune idée de l'utilisation de l'IA pour créer les questions du test jusqu'à cette semaine – alors qu'elle avait demandé au Barreau d'explorer le recours à l'IA pour « améliorer la fiabilité et la rentabilité de ces tests » l'automne dernier, selon Alex Chan, président du Comité des examinateurs du Barreau.
En y regardant de plus près, Mary Basick et Katie Moran ont fait valoir que les questions d'examen, qui devraient prendre des années à élaborer, ont été rédigées beaucoup trop rapidement, tandis que 50 questions pratiques republiées quelques semaines seulement avant l'examen réel contenaient de nombreuses erreurs, ont-ils écrit au début du mois, selon le LA Times .
Ce qui a motivé ces mesures douteuses ressemble à une histoire familière de réduction des coûts désastreuse. Confronté à un déficit de 22 millions de dollars l'an dernier, le Barreau de l'État a abandonné l'examen du barreau multi-États, couramment organisé par la Conférence nationale des examinateurs du barreau, et a décidé de passer à un modèle hybride, alliant tests en présentiel et à distance. Pour créer ce nouveau test, il a signé un contrat de 8,25 millions de dollars avec Kaplan Exam Services et a confié son administration à Meazure Learning.
Suite à un résultat juridiquement justifié, Meazure Learning est désormais poursuivi en justice par certains étudiants ayant passé les examens défectueux. Le Barreau de l'État a annoncé qu'il demanderait à la Cour suprême de Californie d'ajuster les résultats des candidats ayant passé l'examen en février. Chan a indiqué que le Comité des examinateurs du Barreau se réunirait le 5 mai pour discuter d'autres solutions, mais a exprimé des doutes quant à la publication des questions d'examen par le Barreau de l'État ou à leur renvoi au NCBE (National Conference of Bar Examiners)
La Conférence nationale des examinateurs du barreau (NCBE) est une organisation à but non lucratif qui élabore des tests d'admission au barreau et fournit des services d'enquête sur la moralité et l'aptitude. La NCBE propose également des services d'examen, de recherche et de formation aux juridictions ; elle fournit des services aux candidats au barreau pour le compte de ces juridictions ; et fait office de centre national d'information sur l'examen du barreau et les admissions au barreau.