Hay personas que sienten que la mejor IA se vuelve tonta y vago con el tiempo. Es más que una sensación – El diario andino

Una nueva inteligencia artificial (IA) sale al mercado, las redes sociales y las comunidades especializadas alucinan con sus nuevas capacidades, y al mismo tiempo, comienza un ciclo donde los usuarios que conocen los modelos más comienzan a sentir decepción. Según su experiencia, lo que hasta ayer logró sin problemas a través de Chatbot o API, hoy permanece en un vaga intento.

Modelos «súper rotos». Cuando se lanzó, Gemini 2.5 Pro obtuvo un gran elogio en las redes sociales. El modelo fue Muy rápidodel más barato, tenía una gran ventana de contexto y era Una bestia en programación. Sin embargo, durante algunas semanas, han surgido comentarios en comunidades como Reddit que describen un modelo «inutilizable».

Un modelo, que como se describe funcionó increíblemente bien entre marzo y junio, pero que después de usar ahora a fines de julio se lanzó «tonterías absolutas«. Mostró una conversación con Gemini resumida por el asistente en el que no dejó de reconocer errores. Otros usuarios también muestran evidencia de comportamientos irritante como No termine las respuestas.

Son solo ejemplos recientes relacionados con la IA de Google, pero incluso los modelos tan elogiados como Claude han recibido en diferentes momentos. crítica similarincluso recientemente con Código Claude.

Sospecha. Muchos de los usuarios que han criticado los diferentes modelos hablan de modelos de corte: «Supongo que redujeron el tamaño del modelo», dicho Un usuario de Claude 3.5 en Hacker News. La sospecha es que, con el tiempo, y en momentos de la máxima demanda, las empresas comienzan a usar versiones destiladas de modelos de IA que no son tan inteligentes, porque tienen recursos menos dedicados para responder a las indicaciones.

Desarrollador de Ian Nuttal también Observó la degradación del código de Claudey afirmó que pagaría por tener una buena versión que nunca se redujera o degradara en las horas pico. Alex Finn, también desarrollador, expresado Igualmente frustración: «Esto me sucedió con todas las herramientas de programación de IA que he usado».

No es solo una sensación. En 2023, muchos usuarios sintieron que GPT-4, el modelo más avanzado de Openi en ese momento, se estaba volviendo tonto. La compañía afirmó que, al contrario de lo que la comunidad denunció, hicieron que cada nueva versión sea «más inteligente que la anterior».

Sin embargo, un Académico en papel Terminó con especulación: los expertos de Berkeley y Stanford verificaron una caída de precisión espectacular de GPT-4 entre sus variantes en marzo y junio de 2023. En la programación, por ejemplo «el porcentaje de respuestas generadas que se ejecutan directamente se redujeron de 52.0 % en marzo a 10.0 % en junio». Otros estudios estadísticos Al final de 2023, también mostraron una pérdida significativa de calidad entre el modelo de diciembre y May.

Operai y antrópico confirmaron problemas. En diciembre de 2023, Openai conocido que habían recibido los comentarios sobre que el asistente se volviera más vago. Afirmaron que no habían actualizado el modelo desde un mes antes, y que no era intencional, reconociendo el problema y explicando que «el comportamiento del modelo podría ser impredecible».

Algunos usuarios vinieron a diseñar (y lograr, según su experiencia) métodos para alentar al modelo a hacerlo mejor, como la sorprendente promesa de dar una propina o explicarle al chatbot que no tenían dedos para escribir el código.

Más recientemente, Antropic reconocido Para TechCrunch, tiene problemas en el código Claude, como tiempos de respuesta más lentos, antes de quejas de los usuarios de tener un uso limitado sin haber abierto abiertamente. Los usuarios que anteriormente realizaron tareas normalmente y ahora no podían progresar.

En | He probado el día, el navegador que reemplaza el arco y apuesta todo a la IA. No ha salido como se esperaba