Dernière mise à jour le 27 janvier 2023
Chaque jour, il semble y avoir une nouvelle histoire à propos de Chat GPT. Le dernier titre concerne le potentiel du bot AI à réussir une évaluation juridique normalisée. Mais, Chat GPT peut-il réussir l’examen du barreau ?
Chat GPT fait tourner les têtes depuis sa sortie en novembre de l’année dernière. Au cours des dernières 24 heures, Buzzfeed a même annoncé qu’il utiliserait le Modèle d’IA pour écrire une partie de son contenu – une grande nouvelle !
Les développeurs d’OpenAI nous ont montré ce que ce modèle de langage peut faire, et c’est effrayant. Avec les entreprises mettant en œuvre ces modèles pour remplacer les écrivains humains et maintenant son potentiel de réussite aux examens, que pouvons-nous attendre de plus de l’IA à l’avenir ? Voyons si ce modèle de langage d’IA peut réussir ou non le barreau.
Qu’est-ce que l’examen du barreau ?
L’examen du barreau est l’évaluation finale pour quelqu’un qui cherche à devenir avocat agréé. Afin de pratiquer le droit dans un État particulier aux États-Unis, il faut réussir l’examen du barreau spécifique de l’État.
Le test a la réputation d’être très difficile, avec des taux de réussite globaux atteignant parfois aussi bas que 30 %.
Si vous vous êtes déjà demandé à quoi ressemble l’examen, vous n’êtes pas seul. Les questions d’examen du barreau peuvent prendre deux formes différentes, à choix multiples et à essai. Les tests sont généralement répartis sur plusieurs sessions distinctes prenant parfois plusieurs heures.
Examen du barreau sur Chat GPT
Les professeurs de l’Illinois Tech et du Michigan State College of Law ont mis GPT-3.5 face à l’examen du barreau multi-états (MBE). Dans leur document de recherche, ils ont constaté que le modèle”obtenait un taux de réussite dans deux catégories du barreau”et obtenait des notes similaires à celles des”passeurs de tests”humains dans une autre.
Les résultats sont exceptionnels et ils croient que les réponses de GPT-3.5 montrent que le modèle a une”compréhension générale du domaine juridique”. Si vous souhaitez lire l’intégralité du document de recherche, vous pouvez le trouver ici.
Nous savons donc que GPT-3.5 peut passer la barre, mais qu’en est-il des autres examens de droit ? Eh bien, d’autres professeurs de droit de l’Université du Minnesota ont également testé le modèle linguistique d’OpenAI dans un autre scénario d’examen. Ils ont fait Chat GPT prend quatre évaluations couvrant différents cours du diplôme de droit de l’université. Les résultats étaient fascinants.
Le chatbot n’a réussi à produire que des scores médiocres d’un C+ seulement, mais il réussit quand même. Les résultats semblent également suggérer que Chat GPT serait suffisamment avancé pour potentiellement obtenir un diplôme en droit s’il s’agissait d’un étudiant à l’université.
Réflexions finales
Il n’y a aucun doute à ce sujet , les modèles de langage d’OpenAI sont des outils assez intelligents. Sa capacité à réussir les examens est très claire et sa récente note de passage au barreau en a surpris plus d’un. Si vous avez trouvé cet article intéressant, assurez-vous de lire un autre article ici.