No puedo aceptar bromas: la IA no entiende los juegos de palabras, según un estudio | Inteligencia artificial (IA)

Los comediantes que dependen de juegos de palabras inteligentes y escritores de titulares ingeniosos pueden descansar un poco más tranquilos, al menos por el momento, sugiere la investigación de AI.

Expertos de universidades del Reino Unido e Italia han investigado si los grandes modelos lingüísticos (LLM) entienden los juegos de palabras y han descubierto que son desagradables.

equipo de Universidad de Cardiffen el sur de Gales y Universidad Ca’ Foscari de Venecia Llegó a la conclusión de que los LLM pudieron encontrar la estructura de un juego de palabras, pero en realidad no entendieron el chiste.

Un ejemplo que examinan es: “Yo era comediante, pero mi vida se ha convertido en una broma”. Si se reemplazan por: “Yo era comediante, pero mi vida se volvió un desastre”, los LLM todavía tienden a percibir la presencia de un juego de palabras.

También lo intentaron: “Los grandes cuentos de hadas suelen tener dragones”. Si reemplazan “dragón” con el sinónimo “extensión” o incluso una palabra aleatoria, los LLM parecen tener un juego de palabras.

Prof. José Camacho ColladosLa Facultad de Informática y Ciencias de la Computación de la Universidad de Cardiff afirmó que el estudio sugería que la percepción del humor de los estudiantes de maestría en Derecho era frágil.

“En general, los LLM tienden a memorizar lo que han aprendido durante su formación. Por ejemplo, entienden bien los juegos de palabras existentes, pero eso no significa que realmente los comprendan”, afirmó.

“Pudimos engañar constantemente a los LLM modificando los juegos de palabras existentes, eliminando el doble significado que constituye el juego de palabras original. En este caso, los modelos asocian estas oraciones con juegos de palabras anteriores y crean todo tipo de razones para justificar que sean un juego de palabras. Finalmente, descubrimos que su comprensión del juego de palabras era una ilusión”.

El equipo concluyó que cuando se enfrenta a juegos de palabras desconocidos, la tasa de éxito del LLM para distinguir los juegos de palabras de los que no lo son podría caer al 20%.

Se puso a prueba otro juego de palabras: “Los antiguos LLM nunca mueren, simplemente pierden la concentración”. Cuando el enfoque cambió a “ukelele”, LLM todavía lo entendió como un juego de palabras con el argumento de que “ukelele” sonaba un poco como “U-kill-LLM”.

El equipo se maravilló de la creatividad, pero aún así, el LLM no entendió la broma.

Los investigadores dijeron que el trabajo subraya por qué las personas deben tener cuidado al utilizar LLM para aplicaciones que requieren comprensión del humor, la empatía o los matices culturales.

Su investigación se presentó a principios de este mes en la Conferencia 2025 sobre métodos empíricos en el procesamiento del lenguaje natural en Suzhou, China. Un trabajo de investigación titulado Involuntario: LLM y la ilusión de entender el humor.