OpenAI, la compañía que lanzó ChatGPT hace poco más de un año, recientemente recurrió a las redes sociales para abordar las preocupaciones sobre el rendimiento “perezoso” de GPT-4 en las redes sociales y en Google Evaluations.
Captura de pantalla de X, diciembre de 2023Esta medida se produce después de un aumento en los comentarios de los usuarios en línea, que incluso incluyen una reseña de una estrella en Google Evaluations de la compañía.
OpenAI brinda información sobre modelos de chat de capacitación, evaluaciones de desempeño y pruebas A/B
OpenAI, a través de su cuenta de Twitter @ChatGPTapp, detalló las complejidades que implica el entrenamiento de modelos de chat.
Captura de pantalla de X, diciembre de 2023La organización destacó que el proceso no es un “proceso industrial limpio” y que las variaciones en las ejecuciones de entrenamiento pueden conducir a diferencias notables en la personalidad, el estilo creativo y el sesgo político de la IA.
Las pruebas exhaustivas del modelo de IA incluyen métricas de evaluación fuera de línea y pruebas A/B en línea. La decisión last de lanzar un nuevo modelo se basa en un enfoque basado en datos para mejorar la experiencia del usuario “actual”.
La puntuación de revisión de Google de OpenAI se ve afectada por el rendimiento de GPT-4 y problemas de facturación
Esta explicación llega después de semanas de comentarios de los usuarios sobre el empeoramiento de GPT-4 en redes sociales como X.
No sé si alguien más se ha dado cuenta de esto, pero el rendimiento del GPT-4 Turbo es significativamente peor que el del estándar GPT-4.
Sé que está en vista previa en este momento, pero es significativamente peor.
—Max Weinbach (@MaxWinebach) 8 de noviembre de 2023
Se ha debatido si GPT-4 se ha vuelto “vago” recientemente. Mis pruebas anecdóticas sugieren que puede ser cierto.
Repetí una secuencia de análisis antiguos que hice con Code Interpreter. GPT-4 todavía sabe qué hacer, pero sigue diciéndome que haga el trabajo. Un paso ahora son muchos y algunos son extraños. pic.twitter.com/OhGAMtd3Zq
– Ethan Mollick (@emollick) 28 de noviembre de 2023
También aparecieron quejas en los foros de la comunidad de OpenAI.
Captura de pantalla de OpenAI, diciembre de 2023La experiencia llevó a un usuario a dejar una calificación de una estrella para OpenAI a través de Reseñas de Google. Otras quejas se referían a cuentas, facturación y la naturaleza synthetic de la IA.
Captura de pantalla de Reseñas de Google, diciembre de 2023Un usuario reciente de Product Hunt le dio a OpenAI una calificación que también parece estar relacionada con el empeoramiento de GPT-4.
Captura de pantalla de Product Hunt, diciembre de 2023GPT-4 no es el único problema del que se quejan los críticos locales. En GañidoOpenAI tiene una calificación de una estrella por el rendimiento de ChatGPT 3.5.
¡OpenAI ahora tiene solo 3,8 estrellas en Google Maps y una triste 1 estrella en Yelp!
La degradación de GPT-4 realmente ha afectado su calificación. Espero que el negocio sobreviva.https://t.co/RF8uJH1WQ5 pic.twitter.com/OghAZLCiVu
-Nate Chan (@nathanwchan) 9 de diciembre de 2023
La queja:
Captura de pantalla de Yelp, diciembre de 2023En noticias relacionadas con OpenAI, la reseña con más Me gusta se alinea con rumores recientes sobre un volátil lugar de trabajo, alegando que OpenAI es un “entorno despiadado”. No amigable. Trabajadores tóxicos”.
Captura de pantalla de Reseñas de Google, diciembre de 2023Las reseñas votadas como las más útiles en Glassdoor sobre OpenAI sugirieron que la frustración de los empleados y los problemas de desarrollo de productos se derivan del cambio de enfoque de la empresa en las ganancias.
Capturas de pantalla de Glassdoor, diciembre de 2023Este incidente proporciona una perspectiva única sobre cómo las experiencias de los clientes y empleados pueden afectar a cualquier negocio a través de reseñas locales y plataformas de calificación empresarial.
Captura de pantalla de Google, diciembre de 2023Google SGE destaca las reseñas positivas de Google
Además de las quejas ocasionales, los críticos de Google reconocieron el impacto revolucionario de la tecnología OpenAI en varios campos.
Las menciones de reseñas más positivas sobre la empresa aparecen en Google SGE (Search Generative Expertise).
Captura de pantalla de Google SGE, diciembre de 2023Conclusión
Los conocimientos recientes de OpenAI sobre la capacitación de modelos de chat y la respuesta a los comentarios del público sobre el rendimiento de GPT-4 ilustran la naturaleza dinámica y evolutiva de la tecnología de IA y su impacto en quienes dependen de la plataforma de IA.
Especialmente las personas que acaban de recibir una invitación para únete a ChatGPT Plus después de estar en lista de espera mientras OpenAI pausaba nuevas suscripciones y actualizaciones. O aquellos que desarrollan GPT para el próximo Lanzamiento de la tienda GPT.
A medida que avanza la IA, los profesionales en estos campos deben permanecer ágiles, informados y receptivos a los desarrollos tecnológicos y la recepción de estos avances por parte del público.
Imagen de portada: Tada Pictures/Shutterstock