Desbordamiento de pila: cuánto está cayendo el tráfico y cómo se resolvió la “huelga” del moderador • DEVCLASS

Stack Overflow, el sitio web al que los desarrolladores recurren con frecuencia en busca de orientación sobre problemas de codificación, dijo que su caída de tráfico, relacionada con la competencia de los asistentes de IA, ha sido exagerada, aunque nuestro análisis sugiere que sigue siendo significativa. Sin embargo, la compañía resolvió en gran medida su huelga de moderadores, convocada por problemas relacionados con el contenido generado por IA.

Ha habido varios informes de caída del tráfico, incluido el nuestro, ya que los desarrolladores utilizan la conveniencia de los asistentes de codificación en el editor para resolver problemas. La compañía ahora dice que los análisis más extremos, que muestran caídas del 35 al 50 por ciento, fueron incorrectos y fueron causados ​​por cambios en su configuración de Google Analytics.

"Este año, en general, estamos viendo un promedio de aproximadamente un 5 % menos de tráfico en comparación con 2022", afirmó el director de gestión de productos, Des Darilek. Sin embargo, también reconoció que en abril el tráfico se redujo en un 14%, atribuido a "desarrolladores que probaron GPT-4", el motor OpenAI de la compañía que también impulsa GitHub Copilot. Por lo tanto, hay una disminución, aunque algunos informes la hayan exagerado.

Otra forma de ver esto es contar cuántas preguntas se hacen. Este informe muestra que han aparecido nuevas preguntas desde el año pasado; y continuamos con nuestra propia consulta SEDE (Stack Exchange Data Explorer) que muestra que abril no fue único. Año tras año, abril bajó un 22,5%, mayo un 25,6%, junio un 24,5% y julio un 22,2%, según las preguntas realizadas.

La solución esperada por Stack Overflow es un nuevo servicio en preparación llamado OverflowAI, además de algo quizás más importante, un complemento de Visual Studio Code que podría rivalizar con la conveniencia de Copilot, aunque su enfoque es diferente ya que no insertará código directamente.

Sin embargo, la buena noticia para la empresa es que la “huelga” de moderadores prácticamente ha terminado y las relaciones entre el personal y los moderadores voluntarios mejoraron. El problema clave, descrito en una carta abierta, era que los moderadores no podían eliminar respuestas a preguntas técnicas cuando el motivo de la eliminación era que eran generadas por IA. Los moderadores argumentaron que tales respuestas son propensas a “información incorrecta y plagio”.

La posibilidad de respuestas incorrectas es un problema inherente a la IA generativa, utilizada por ChatGPT de Open AI, Bard de Google y otros sistemas similares. La IA generativa es fuerte en el sentido de su capacidad para crear respuestas fluidas a la pregunta planteada, pero no hay garantía de que sea correcta. Las preguntas frecuentes de GitHub Copilot, por ejemplo, afirman que “el código público puede contener patrones de codificación inseguros, errores o referencias a API o modismos obsoletos. Cuando GitHub Copilot sintetiza sugerencias de código basadas en estos datos, también puede sintetizar código que contiene estos patrones no deseados”.

El resultado de las negociaciones fue que Stack Exchange (la empresa detrás de Stack Overflow) acordó permitir la eliminación de contenido basándose en "un único indicador sólido del uso de GPT, o en varios indicadores más débiles". La política al respecto establecida anteriormente por la empresa quedó obsoleta. Además, la empresa se comprometió a seguir manteniendo los volcados de datos del contenido de los suscriptores, el acceso a la API y el Stack Exchange Data Explorer, aunque con la cláusula de que puede "colocar barreras de seguridad a su alrededor para garantizar que las empresas que construyen modelos de lenguaje, etc., paguen por el acceso". ” – una condición que algunos miembros de la comunidad consideran inapropiada dado que los volcados de datos están sujetos a una licencia creative commons, CC by-SA 4.0, que permite la adaptación para cualquier propósito sujeto al crédito apropiado. Además, hay cambios en la forma en que Stack Exchange se comunica con los moderadores y un proceso para cuando el propio Stack Exchange parezca haber violado su acuerdo de moderador.

Esta huelga no fue comparable a una huelga de empleados, porque los moderadores de Stack Overflow son voluntarios; y en el estilo típico de Stack Overflow, la cuestión de si la huelga había terminado era en sí misma un tema de debate, aunque en la práctica parece que la moderación ha vuelto a la normalidad.

La IA es el hilo conductor entre la huelga, el tráfico y los nuevos servicios. Stack Overflow sigue siendo de gran importancia para muchos desarrolladores, y su ventaja sobre la IA es la moderación y el consenso de los expertos aplicados a sus preguntas, siempre que atraigan suficiente interés. Dicho esto, los sitios luchan con la IA y sus implicaciones parecen continuar.