OpenAI, la compañía que lanzó ChatGPT hace poco más de un año, recientemente recurrió a las redes sociales para abordar las preocupaciones sobre el rendimiento “perezoso” de GPT-4 en las redes sociales y en Google Reviews.

Esta medida se produce después de un aumento en los comentarios de los usuarios en línea, que incluso incluyen una reseña de Google de una estrella en el perfil comercial de Google de la empresa.

OpenAI brinda información sobre modelos de chat de capacitación, evaluaciones de desempeño y pruebas A/B

OpenAI, a través de su cuenta de Twitter @ChatGPTapp, detalló las complejidades que implica el entrenamiento de modelos de chat.

Captura de pantalla de X, diciembre de 2023

La organización destacó que el proceso no es un “proceso industrial limpio” y que las variaciones en las ejecuciones de entrenamiento pueden conducir a diferencias notables en la personalidad, el estilo creativo y el sesgo político de la IA.

Las pruebas exhaustivas del modelo de IA incluyen métricas de evaluación fuera de línea y pruebas A/B en línea. La decisión final de lanzar un nuevo modelo se basa en un enfoque basado en datos para mejorar la experiencia del usuario “real”.

La puntuación de revisión de Google de OpenAI se ve afectada por el rendimiento de GPT-4 y problemas de facturación

Esta explicación llega después de semanas de comentarios de los usuarios sobre el empeoramiento de GPT-4 en redes sociales como X.

No sé si alguien más se ha dado cuenta de esto, pero el rendimiento del GPT-4 Turbo es significativamente peor que el del estándar GPT-4.

Sé que está en vista previa en este momento, pero es significativamente peor.

—Max Weinbach (@MaxWinebach) 8 de noviembre de 2023

Se ha debatido si GPT-4 se ha vuelto “vago” recientemente. Mis pruebas anecdóticas sugieren que puede ser cierto.

Repetí una secuencia de análisis antiguos que hice con Code Interpreter. GPT-4 todavía sabe qué hacer, pero sigue diciéndome que haga el trabajo. Un paso ahora son muchos y algunos son extraños. pic.twitter.com/OhGAMtd3Zq

– Ethan Mollick (@emollick) 28 de noviembre de 2023

También aparecieron quejas en los foros de la comunidad de OpenAI.

Captura de pantalla de OpenAI, diciembre de 2023

La experiencia llevó a un usuario a dejar una calificación de una estrella para OpenAI a través de Reseñas de Google.

Además de la “degeneración” del rendimiento de GPT-4 y la falta de inteligencia, algunas reseñas de Google señalaron problemas de facturación y atención al cliente.

Captura de pantalla de Reseñas de Google, diciembre de 2023

Curiosamente, la reseña de Google con más Me gusta de hace cinco años se alinea con los rumores recientes sobre un lugar de trabajo volátil, alegando que OpenAI es un “entorno despiadado”. No amigable. Trabajadores tóxicos”.

Captura de pantalla de Reseñas de Google, diciembre de 2023

Este incidente proporciona una perspectiva única sobre cómo las experiencias de los clientes pueden afectar la presencia en línea de una empresa a través de las calificaciones y los perfiles comerciales de Google.

Captura de pantalla de Google, diciembre de 2023

Google SGE destaca las reseñas positivas de Google

Además de las quejas ocasionales, los críticos de Google reconocieron el impacto revolucionario de la tecnología OpenAI en varios campos.

Las menciones de reseñas más positivas sobre la empresa aparecen en Google SGE (Search Generative Experience).

Captura de pantalla de Google SGE, diciembre de 2023

Conclusión

Los conocimientos recientes de OpenAI sobre la capacitación de modelos de chat y la respuesta a los comentarios del público sobre el rendimiento de GPT-4 ilustran la naturaleza dinámica y evolutiva de la tecnología de IA y su impacto en quienes dependen de la plataforma de IA.

A medida que avanza la IA, los profesionales en estos campos deben permanecer ágiles, informados y receptivos a los desarrollos tecnológicos y la recepción de estos avances por parte del público.

Imagen de portada: Tada Images/Shutterstock