Ingeniería · IA · Personas · Tecnología · 13 de noviembre de 2026

El gasto en tokens no mide productividad: en JetBrains, una semana con el doble de gasto tuvo cerca de 10 % más de commits

Por Redacción Adaptant · Fuente: arXiv 2611.13396 (Agarwal, Lvova, Sergeyuk, Serova, Bryksin, Zimmermann y Vasilescu) · publicada el 10 de noviembre de 2026

El estudio vincula cinco semanas de uso de tokens en agentes de código (29 de junio a 2 de agosto de 2026) con los commits de 404 ingenieros de JetBrains y analiza una encuesta interna anónima de 412 empleados, que no puede cruzarse con los datos individuales. El gasto varió sobre todo entre personas, y quienes más gastaban fueron en buena medida los mismos a lo largo de las cinco semanas. Entre semanas con una cantidad similar de commits, el percentil 90 del gasto fue de 39 a 240 veces el percentil 10. Dentro de un mismo ingeniero, una semana con el doble del gasto habitual tuvo alrededor de 10 % más de commits, y una semana con el doble de commits consumió alrededor de 20 % más de tokens; son asociaciones y no efectos causales, porque el uso era voluntario. Las métricas de actividad disponibles explicaron 38 % de la variación del gasto entre ingenieros y 13 % de la variación semanal de cada uno; el rol y el equipo no mejoraron la predicción. Hasta dos quintos del gasto no varió con los commits de la semana, una cota superior que incluye trabajo que no llega al repositorio. En la encuesta, las personas con roles técnicos informaron haber usado los agentes para al menos una tarea distinta de programar, como análisis, investigación o planificación, en 89 % de las evaluaciones. Los autores recomiendan usar el gasto en tokens, como mucho, para la contabilidad de recursos y no para evaluar ingenieros. Se trata de un preprint sin revisión por pares; cuatro de los siete autores trabajan en JetBrains, que desarrolla herramientas de IA para programación.

Temasproductividad · metricas · agentes_de_codigo · impacto_personas