El CEO de Cognition sugiere evaluar con producción real en lugar de la evaluación de volumen de tokens inflado.

Según el monitoreo de Beating, el cofundador y CEO de la startup de programación de IA Cognition, Scott Wu, señaló en el podcast Founders que algunas empresas han ido "demasiado lejos" al evaluar el desempeño de los programadores contando la cantidad de tokens de IA consumidos por los empleados, y que deberían basarse en el trabajo real completado y los resultados obtenidos.

Esta tendencia se conoce en Silicon Valley como tokenmaxxing, donde los empleados, para obtener ventajas en los paneles internos de uso de IA o en las evaluaciones de desempeño, llaman reflexivamente a herramientas de programación de IA como Claude, Codex o Cursor en grandes cantidades. Jacob Lauritzen, director técnico de la startup legal AI Legora, también criticó este mes en un podcast que muchas personas muestran el uso de tokens en las evaluaciones de desempeño, lo que lleva a los empleados a generar volumen solo para que los datos se vean bien, calificándolo como un método de evaluación estúpido.

Andrew Feldman, CEO del desarrollador de chips Cerebras Systems, dijo en la conferencia Bloomberg de este mes que dar a los empleados un límite ilimitado de tokens fue estúpido desde el principio. Feldman sugirió que las empresas deberían centrarse más en la rentabilidad al usar herramientas de IA, utilizando modelos de código abierto de bajo costo en lugar de abusar de modelos cerrados de gama alta en tareas comunes.