Tratar de aprender sobre un tema interactuando con chatbots de inteligencia artificial (IA) como ChatGPT, en lugar de seguir enlaces proporcionados por la búsqueda web, genera un conocimiento más superficial y menos útil, encuentra un estudio publicado este martes.
Además, los consejos que ofrecen quienes se basan en ese conocimiento superficial que proporcionan los granes modelos de lenguaje (LLM por el inglés) tienden a ser más escasos, menos originales e incluso menos propensos a ser adoptados por otros.
Esta son las principales conclusiones del reporte de una investigación elaborada por Shiri Melumad y Jin Ho Yun y publicado en la revista PNAS Nexus (por el inglés para Actas de la Academia Nacional del Ciencias). Los autores aclaran que en su investigación se utilizó ChatGPT como LLM y búsquedas en Google.
Te podría interesar
La investigación incluyó varios experimentos con cerca de cinco mil de participantes en línea, que fueron asignados aleatoriamente para aprender sobre temas como, por ejemplo, cultivar un huerto, llevar un estilo de vida más saludable o cómo lidiar con estafas financieras, utilizando LLMs o enlaces tradicionales de búsqueda web de Google.
En general, los participantes que utilizaron LLMs dedicaron menos tiempo a interactuar con los resultados de búsqueda y reportaron desarrollar un conocimiento más superficial en comparación con quienes usaron enlaces web, incluso cuando los datos subyacentes eran idénticos.
Posteriormente, los participantes escribieron sus propios consejos basados en lo que habían aprendido, los cuales fueron evaluados por otros usuarios.
Consejos aun más superficiales
Al formular consejos, los usuarios de LLM invirtieron menos esfuerzo y produjeron contenido objetivamente más breve, con menos referencias fácticas y mayor similitud con los consejos de otros participantes.
En un experimento con mil 501 evaluadores independientes, los destinatarios, que desconocían la procedencia de los consejos, calificaron los consejos escritos tras buscar en el LLMs como menos útiles, informativos y fiables que los basados en búsquedas web, y se mostraron menos dispuestos a adoptarlos.
Si bien los LLMs son innegablemente eficientes, basarse en resúmenes presintetizados puede transformar el aprendizaje de una búsqueda activa a una actividad pasiva. Según los autores, los LLM son, por lo tanto, potencialmente menos útiles que la búsqueda web si el objetivo es desarrollar conocimiento procedimental (una comprensión de cómo hacer las cosas).