Google pillado falseando parte de la demostración de la IA Gemini

Google ha admitido que montó un vídeo durante la demostración de su nuevo Gemini modelo de IA generativa. Gemini es la respuesta directa de Google al Modelo GPT-4 de OpenAIde OpenAI, que ha arrasado en Internet desde su presentación el pasado noviembre. Hasta el lanzamiento de GPT-4, Google había sido considerado en general el líder del software de IA, pero de repente se encontró rezagado en la carrera de la IA generativa.

Un año después del lanzamiento de GPT-4, Google vuelve a la carga con Gemini, del que afirma que supera a GPT-4, pero que también es el primer modelo de IA que supera a los expertos humanos en comprensión lingüística multitarea masiva (MMLU). Al parecer, Gemini "Ultra" obtiene una puntuación del 90,04% en el MMLU superando a GPT-4, que obtiene una puntuación del 87,29%. Es uno de los tres nuevos sabores de Gemini que también viene en tamaños "Pro" y "Nano" - este último hecho lo suficientemente pequeño para los dispositivos Android como el Pixel 8 Pro.

Sin embargo, puede que no todo sea lo que parece en cuanto a la primera demostración ostensiblemente impresionante de Google (incrustada a continuación) de Gemini. En el vídeo, se escucha a Gemini interactuar inicialmente con una persona que le pregunta lo que ve dibujado en tiempo real como un garabato que se transforma en un objeto más complejo. La demostración continúa a través de una serie de escenarios e interacciones adicionales, a cada cual más impresionante.

Cuando Bloomberg se puso en contacto con Google para preguntarle cómo se había creado el vídeo, Google admitió que estaba editado y que la voz de Gemini no respondía a las imágenes en tiempo real, sino que cada una era una imagen fija independiente. Además, las indicaciones no las hacía la persona a la que se oye hablar en el vídeo mediante reconocimiento de voz natural (como parece), sino que las indicaciones de voz se hacían en realidad mediante entradas de texto. Según Google, el vídeo se hizo simplemente para "inspirar a los desarrolladores"

En el descargo de responsabilidad que acompaña al vídeo en YouTube, Google sólo reconoce que "A efectos de la demostración, se ha reducido la latencia y se han acortado las salidas de Gemini para ser más breves" Esto difiere notablemente del comentario que Google proporcionó a Bloomberg, en el que se afirmaba que el vídeo se había creado "utilizando fotogramas de imágenes fijas del metraje e incitando mediante texto" Con el GPT-5 de OpenAI en camino, parece que Google está desesperado por recuperar la corona de rey de la IA, muy desesperado.

Hemos preguntado a la IA Bard de Google qué tenía que decir sobre la metedura de pata de la IA Gemini de Google - su respuesta está incrustada a continuación por si le interesa.