Investigadores de la Universidad Ben-Gurion estudiaron cómo las personas evalúan la confiabilidad de los recuerdos de los demás y compararon si un modelo humano o uno de IA es más preciso para evaluar la confiabilidad.
El trabajo fue publicado en la revista Proceedings of the National Academy of Sciences.
Los recuerdos de las personas no son una descripción precisa del pasado y están sujetos a errores y distorsiones incluso después de cortos períodos de tiempo. ¿Cómo podemos basar nuestras acciones en fuentes tan poco fiables?
La Dra. Talia Sadegh del Departamento de Ciencias Cognitivas y Cerebrales de la Universidad Ben-Gurion y sus colegas se propusieron comprender cómo las personas reconocen y verifican la exactitud de los recuerdos de otras personas.
Sadegh dice: “La investigación analizó cómo logramos basar el conocimiento, a veces muy importante, en recuerdos que no siempre son confiables, y ¿pueden los modelos de IA como ChatGPT ayudarnos a determinar la verdad de los recuerdos?”
El estudio simuló situaciones de la vida real en las que una persona tenía que decidir si un recuerdo contado por otra era cierto. Por ejemplo, ¿puedes confiar en la siguiente afirmación: “Recuerdo que esta mujer estaba en una fiesta porque recuerdo que llegó tarde y llevaba un vestido muy bonito”.
Los científicos han demostrado que la evaluación de la confiabilidad de la información tanto por parte de una persona como de un modelo de IA se realiza sobre la base de un cierto conjunto de palabras que indican la confiabilidad de la información. De las 20 palabras que se asociaban con mayor frecuencia con la memoria correcta, 14 eran comunes a humanos y máquinas. Pero resultó que el hombre tenía algo más.
Una persona verifica la confiabilidad de los recuerdos de otras personas no solo por la información que se le proporciona, sino también por el grado de confianza del hablante. La puntuación de confianza mejora la puntuación de confianza y, en promedio, una persona reconoce la información correcta un 10% más a menudo que la que reconoce el modelo. Cuando una persona verifica la exactitud de los recuerdos de otra persona, evalúa en qué medida el recuerdo está relacionado con experiencias sensoriales vívidas y detalladas y qué tan segura está la persona cuando habla de sus recuerdos.
Es más difícil para el modelo de IA evaluar la connotación emocional de la información y valorar la importancia de la información “extra” que refuerza la confiabilidad de la memoria. Por ejemplo, la credibilidad de la evidencia que citamos anteriormente (sobre una mujer en una fiesta) se ve reforzada por la palabra “muy” (“un vestido muy hermoso”). Una fuerte reacción emocional indica que el hablante probablemente vio a la mujer porque recordaba y apreciaba su vestido. Para una persona está claro, incluso en un nivel intuitivo, que esto aumenta la confiabilidad de la memoria, pero el modelo de IA aún no lo hace.