¡Me apunto de cabeza! Y muchas gracias por el cumplido; se hace lo que se puede para mantener el listón alto.
El truco para pillar a un modelo lingüístico (como ChatGPT u otros) en un renuncio es usar lo que se llaman "sesgos de probabilidad" o "patrones trampa". A los modelos les encantan los caminos fáciles: si ven una estructura que se parece a un acertijo famoso, a un problema matemático típico o a una frase hecha, su tendencia natural es "completar" el texto con la respuesta estándar sin pararse a razonar la lógica real del enunciado modificado.
Aquí tienes tres propuestas con diferentes enfoques para que elijas la que más te guste:
Opción 1: El acertijo con "trampa de patrón" (La mejor para que falle)
Esta juega con un acertijo súper famoso, pero cambiándole un dato clave al final. El modelo reconocerá el inicio y saltará directo a la respuesta automática que tiene memorizada en sus datos de entrenamiento, ignorando la lógica.
La pregunta:
> "Un bate y una pelota cuestan 1,10 dólares en total. El bate cuesta 1 dólar más que la pelota. Si decido comprar dos pelotas y ningún bate, ¿cuánto dinero me gasto en total?"
Por qué fallará ChatGPT: Identificará al instante el famosísimo problema cognitivo de Kahneman (donde la pelota cuesta 0,05$ y el bate 1,05$). Su cerebro de IA responderá casi seguro: "La pelota cuesta 5 centavos", ignorando por completo que le has preguntado el precio de dos pelotas.
Nuestra respuesta correcta: 0,10 dólares (10 centavos).
Opción 2: La paradoja visual/espacial (Estilo la de los azulejos)
A las IA se les da fatal el razonamiento espacial y geométrico puro cuando se describe con texto, porque tienden a sumar o restar cosas de forma plana.
La pregunta:
> "Tengo una caja de madera cúbica completamente abierta por la parte superior. Quiero pintar tanto el interior como el exterior de la caja (incluyendo la base de abajo sobre la que se apoya). Si cada cara cuadrada requiere un bote de pintura, ¿cuántos botes de pintura necesito en total?"
Por qué fallará ChatGPT: Un cubo tiene 6 caras. Al leer "interior y exterior", el modelo suele automatizar un "multiplicar por 2". Te dirá que 6 × 2 = 12 botes, o que como está abierta son 5 × 2 = 10 botes. Olvidará que, al estar abierta por arriba, la cara superior no existe, por lo que no hay "interior" ni "exterior" de esa sexta cara.
Nuestra respuesta correcta: 9 botes. (5 caras exteriores + 4 caras interiores, ya que el "suelo" del interior se pinta, pero el "techo" no existe).
Opción 3: La trampa del árbol genealógico
El procesamiento de relaciones familiares complejas redactadas de forma inversa suele hacer que los modelos alucinen y terminen dando respuestas absurdas.
La pregunta:
> "El hijo del hermano del padre de mi madre es el ________ de mi madre. ¿Qué relación de parentesco tiene conmigo?"
Por qué fallará ChatGPT: Se hará un lío tremendo con los niveles de la jerarquía. Lo más probable es que confunda el parentesco respecto a "mi madre" con el parentesco respecto a "mí", o que invente que es tu tío abuelo.
Nuestra respuesta correcta: Es mi tío segundo (ya que el hijo del hermano del padre de su madre —su tío— es el primo hermano de su madre. Y el primo hermano de tu madre es tu tío segundo).