Guía para usar IA para recopilación bibliográfica

La mejor forma de pensar en la IA en el contexto de la investigación es como un asistente de investigación.

La idea es delegar las tareas que te consumen tiempo, pero aportan poco a tu entendimiento de un problema y su solución. Regularmente esas tareas caían en el asistente de investigación (si fuiste uno alguna vez, sabes de lo que te hablo).

La recopilación bibliográfica es una de esas tareas.

Mis intentos (fallidos) de usar la IA como asistente de investigación

Estuve intentando hacer que una IA hiciera esa recopilación desde que Bing habilitó GPT-4 en su buscador.

En ese momento, chatGPT aún no tenía acceso al internet y no podía pedirle que hiciera búsquedas. Hoy en día si puede, pero me da la impresión de que son búsquedas muy superficiales y tiende mucho a alucinar (se inventa cosas).

Lo que cambió: acaba de salir el modelo o1, o Strawberry.

Aparentemente, el nombre viene de un detalle curioso de los modelos anteriores, que cuando le preguntabas cuántas “r” tiene la palabra “Strawberry”, contaba 2. OpenAI lanzó este nuevo modelo, presumiendo que puede resolver problemas mejor que expertos en física con doctorado. No es que hayan hecho un nuevo modelo con más parámetros, sino que hicieron una versión más especializada. Aparentemente, GPT4o escribe mejor que o1 en general, pero cuando se trata de hacer razonamientos complejos, o1 es mejor.

En otras palabras, Strawberry si cuenta tres “r”.

Básicamente, lo que nos están ahorrando es a hacer mucho prompt-engineering, así no tenemos que estarlo guiando paso por paso para que haga un razonamiento apropiado.

Le pedí a o1 que me ayudara a hacer una recopilación bibliográfica sobre la pobreza energética, que es un tema en el que estoy colaborando en una investigación.

Después de casi un minuto de razonamiento, me entregó el resultado en una tabla con todo lo que le pedí.

El problema: la mitad de las referencias tenían enlaces inventados que no llevaban a ninguna parte. Otras cuantas fueron de plano inventadas.

El problema es que Strawberry aún no tiene acceso a internet. Con el mismo prompt que te comparto abajo, GPT-4 logró hace un mejor trabajo.

Advertencia: Esto no es para completos principiantes

No hagas esto si nunca has hecho una recopilación bibliográfica por tu cuenta.

La razón #1 es que no sabrás identificar los buenos resultados de los malos. Tienes que haber hecho recopilaciones bibliográficas por tu cuenta para identificar los resultados que son útiles para tu investigación y los que no.

La razón #2 es que la IA es muy buena para inventar datos que parecen reales. Entre los resultados que me arrojó en esa búsqueda, había un “paper” de Esther Duflo y Abihit Banerjee que medía el impacto de la pobreza energética en la educación en India. Excepto que Duflo y Banerjee jamás han hecho ningún estudio de ese tipo. El nombre y todas las características sonaban muy convincentes y me habrían engañado fácilmente.

Esto no quiere decir que tengas que ya ser un experto SNI 2000 para comenzar a usar la IA. Sólo digo que es mucho más fácil hacer experiencia para supervisar un buen resultado si ya lo has hecho a si nunca te has puesto a recolectar bibliografía por tu cuenta.

Lo que significa es que antes de lanzar la orden, tienes que tener algunas cosas preparadas. Básicamente, necesitas saber:

• Qué argumento estás buscando hacer en tu investigación.
• Cuál es el problema que estás solucionando.
• Y si conoces ya algunos resultados o autores, puedes pedirle que los utilice para su búsqueda (pero que no se limite a ellos).

Este es el prompt

Copia y pega este prompt en tu inteligencia artificial favorita: