El LLM moderno frente al Atari de los 70: Gemini admite que no puede ganar y se retira
Al parecer, el chatbot Gemini de Google se negó a jugar una partida de ajedrez con la Atari 2600 después de enterarse de que la consola de juegos de época ya había tumbado a ChatGPT y a Microsoft Copilot.
El arquitecto de infraestructuras Robert Caruso declaró a The Register que la cuestión de le intrigaba porque "mientras ChatGPT y Copilot son primos construidos sobre la misma base de OpenAI, Gemini es una bestia completamente diferente"
Caruso ya había enfrentado anteriormente a la Atari 2600, con su mísero procesador de 8 bits a 1,19 MHz y la friolera de 128 bytes de RAM, con el poderío de ChatGPT, obteniendo unos resultados muy interesantes.
Después de destrozar a ChatGPT, el Atari 2600 se enfrentó al Copilot de Microsoft, y los resultados fueron muy parecidos. Curiosamente, en ambos casos, los chatbots de IA parecían tener un sentido equivocado de la confianza y presumían de sus proezas en el ajedrez.
El Gemini de Google también lo hizo. Sin embargo, cuando Caruso informó al chatbot de los combates anteriores de Atari 2600, éste pareció dar marcha atrás y admitir que había "alucinado con su destreza en el ajedrez", mostrando un raro sentido de evaluación interna de habilidades para una IA.
Géminis decidió entonces que "cancelar el combate es probablemente la decisión más sensata y eficiente en términos de tiempo" Caruso dijo que estaba impresionado por la capacidad de Géminis para identificar sus defectos.
"Añadir estas comprobaciones de la realidad no se trata sólo de evitar divertidas meteduras de pata ajedrecísticas. Se trata de hacer que la IA sea más fiable, digna de confianza y segura, especialmente en lugares críticos donde los errores pueden tener consecuencias reales", declaró Caruso a The Register.
Fuente(s)
El Registro | Robert Jr. Caruso en LinkedIn
Fuente de la imagen: Evan-Amos en Wikimedia Commons
