Busco profes para experimento

Los alumnos ya pueden hacer su tarea usando inteligencia artificial. ¿Puedes detectar si un trabajo está hecho por un humano o por una computadora?

Un robot escribiendo lleno de libros
Un robot hizo mi tarea. Fuente: Stable Difussion

La inteligencia artificial nos alcanzó. Muchos de nuestros alumnos pronto descubrirán que ya es posible hacer ensayos usando inteligencia artificial.

Esta herramienta ya puede hacer noticias y reseñas. ¿Podría hacer un texto especializado sobre algún tema de nivel universitario? Dicho de otra manera: ¿los profesores seríamos capaces de detectar si un texto viene de una inteligencia artificial o lo hicieron nuestros alumnos?

Para responder esta pregunta he diseñado un experimento. En este texto voy a explicar más a fondo en qué consiste, pero antes te quiero pedir dos cosas: si eres profesor y te interesa participar en el proyecto da click abajo y regístrate como parte de este proyecto. Si conoces a alguien a quien piensas que le podría interesar participar, mándale este post para que se registe. Tenemos hasta el 8 de Noviembre.

✍🏽
En este post
* Un experimento para detectar si la inteligencia artificial ya nos superó a los profesores
* Cómo funciona la inteligencia artificial basada en texto

El experimento

El objetivo de este trabajo es identificar la capacidad de la inteligencia artificial de engañar a los profesores en la creación de un ensayo.

Los profesores

Para participar en este experimento, tienes que ser profesor en alguna universidad hispanohablante. Este experimento es en español. Se aceptan profesores de posgrado o de nivel medio superior con restricciones (pregunta si eres candidato en hola@marionomics.com).

Regístrate en este formulario antes del 8 de Noviembre.

El ensayo

El profesor debe encargar un ensayo de una cuartilla sobre un tema relacionado con la clase. Este ensayo puede ser parte del mismo programa o puede contar como puntos adicionales por participación.

Importante. El ensayo se manda en formato de texto por medio de un formulario y no deben mandarlo al profesor directamente. El formulario se lo haré llegar a los profesores para que lo distribuyan entre sus alumnos. En él les pido que coloquen su ensayo, además de información básica que me permitirá identificarlos y entenderlos mejor.

📖
¿Cómo debo pedir el ensayo?
* Extensión máxima: una cuartilla (el equivalente a una cuartilla escrita en Word o Google Sheets con letra Times a 12 puntos).
* No es necesario que le pidas una estructura específica. Puedes pedirles que se componga de introducción, desarrollo y conclusión, pero que no incluyan títulos. Si el documento tiene títulos yo los quitaré para entregarte todos los ensayos (con y sin IA) homologados y no los puedas distinguir.
* Recuerda: El ensayo se escribe en un formulario de google. No habrá oportunidad de incluir formato, imágenes o tablas en el texto.

Evalúa los ensayos

Detrás de bambalinas hay un trabajo de organización en el que algunos ensayos los cambiaré por ensayos hechos por una inteligencia artificial. Tu no sabrás cuáles fueron intercambiados, incluso no sabrás si realmente te cambié los ensayos o no.

A tu correo te llegará el acceso a los ensayos y al formulario para calificarlos. Necesito que me des dos cosas: una calificación en algunas áreas del ensayo (independientemente de si piensas que viene de un humano o de una inteligencia artificial) y que me digas si fue hecho por humano o IA.

Este instrumento te lo haré llegar a tu correo electrónico.

📅
Fechas importantes:
* 8 de Noviembre. Cierre del registro de profesores
* Del 9 al 13 de Noviembre. Envío de formulario e instrucciones a los profesores participantes.
* Del 14 al 22 de Noviembre. Recepción de trabajos de los estudiantes.
* 23 al 30 de Noviembre. Profesores califican ensayos.
* Diciembre - Enero. Procesamiento de la información y redacción de la investigación.
* Enero 2023. Publicación de los resultados preliminares en marionomics.com.

Sobre la Inteligencia Artificial

El 28 de Mayo de 2020, un grupo de 31 ingenieros e investigadores del laboratorio Open AI publicaron un preprint en ArXiv que describe la tercera generación de un modelo de inteligencia artificial que genera texto a partir de texto.

El modelo se llama GPT-3 (Generative Pre-trained Transformer 3), y con un poco de texto es capaz de generar textos, novelas y noticias. También se está implementando este tipo de modelos en la auto-generación de código, como lo hace copilot, de Github.

Las opciones son infinitas. Actualmente GPT-3 es capaz de crear recetas de cocina (no hay garantía de que sean buenas), reseñas de películas, traducir entre lenguajes de programación y resúmenes de textos. Pero hay un uso interesante que quiero poner a prueba. GPT-3 es al día de hoy capaz de crear ensayos breves y traducirlos a diferentes idiomas.

Esta es una guía que generó sobre la forma de escribir un ensayo sobre las contribuciones de Nicolás Tesla a la tecnología.

Imagen de muestra del texto que arroja gpt-3
GPT-3 es capaz de redactar una guía para un ensayos muy decente.

Cómo funciona GPT-3

¿Por qué no mejor le preguntamos directamente a GPT-3?

🤖
GPT-3 es una plataforma de aprendizaje estadístico de máquina que permite a los desarrolladores entrenar y publicar modelos de Inteligencia Artificial. También se dice que es escalable y eficiente en su habilidad de manejar grandes cantidades de datos. ¿Cómo funciona GPT-3? GPT-3 funciona entrenando modelos en una base de datos grande y desplegándolos en una base de datos más pequeña. Se dice que la plataforma es eficiente en su habilidad de manejo de grandes cantidades de datos. También se dice que los modelos son escalables, lo que significa que pueden incrementarse y reducirse como se necesite.

Este bloque de arriba es la respuesta que me dió el mismo GPT-3 al solicitarle que me describiera cómo funciona. Le hice unos pequeños arreglos durante la traducción, pero en general es impecable.

El punto de esto es que GPT-3 toma un montón de textos de internet y predice lo que debería decir el párrafo siguiente. Es un modelo similar al que utiliza tu teléfono cuando estás escribiendo y te empieza a sugerir la siguiente palabra, pero mucho más poderoso.

Teclado. Está escrito: "Tengo mucho" y el teléfono sugiere "trabajo"
Tu celular sabe más o menos lo que quieres escribir ya

¿Alguna pregunta?

Este blog tiene una sección de comentarios. Todas las dudas que salgan durante estos días las estaré recolectando en este mismo post en la sección de preguntas frecuentes. Mientras tanto, regístrate en el formulario aquí abajo y comparte este post a quien crees que le gustaría participar.


¡Genial! Te has registrado exitosamente.

¡Bienvenido de vuelta! Has iniciado sesión correctamente.

Te has suscrito correctamente a Escribe tu primer paper de Economía.

¡Éxito! Revisa tu correo electrónico para obtener el enlace mágico para iniciar sesión.

¡Éxito! Se ha actualizado la información de facturación.

No se actualizó tu información de facturación.

Sígueme en Mastodon