Créé en 1990 par le philanthrope américain Hugh Loebner, le prix Loebner est la première tentative de mettre concrètement en œuvre le test de Turing dans une compétition annuelle. Des juges humains dialoguent en parallèle avec des programmes et avec de vrais humains, sans savoir lesquels sont lesquels, puis tentent de les distinguer.
Une médaille de bronze, d’argent… et jamais d’or
Le règlement prévoyait trois niveaux de récompense : une médaille de bronze annuelle pour le programme jugé le plus convaincant, une médaille d’argent pour le premier programme trompant les juges dans une conversation textuelle sans restriction de sujet, et une médaille d’or, jamais attribuée, pour un programme capable de tromper les juges y compris via des indices visuels et auditifs. La médaille de bronze a longtemps été remportée par des programmes reposant sur des règles simples plutôt que sur une véritable compréhension du langage.
Des critiques qui ont nourri le débat
Le concours a souvent été critiqué : certains chatbots primés gagnaient en détournant la conversation par l’humour, en jouant des personnages excentriques ou en évitant habilement les questions difficiles, plutôt qu’en démontrant une réelle intelligence. Ces critiques ont largement nourri la réflexion sur les limites du test de Turing lui-même, et ont motivé la recherche d’alternatives comme le test de Winograd.
Le prix Loebner a cessé d’être organisé sous sa forme originale au début des années 2020, à mesure que les grands modèles de langage rendaient la distinction entre humain et machine de plus en plus difficile dans des conditions de test classiques — rendant en un sens la compétition obsolète, faute d’adversaire suffisamment mis en difficulté.
Comprendre l'intelligence artificielle, un repère à la fois
Qu'il s'agisse d'histoire, d'éthique, d'apprentissage automatique ou de linguistique computationnelle, chaque mécanisme éclaire un peu mieux ce que les systèmes actuels savent réellement faire. Comprendre ces bases permet de suivre l'actualité de l'IA avec plus de discernement.
Pour aller plus loin
- Comparer les capacités réelles de différents systèmes conversationnels
- Vérifier la source d'une affirmation avant de la reprendre à son compte
- Suivre l'évolution réelle des systèmes d'IA, pas seulement leurs annonces
- Partager ces repères avec vos proches pour nourrir un débat mieux informé
