El director ejecutivo de Cognition dice que las clasificaciones de tokens son "direccionalmente correctas"

 | AI,Startups,Tech,leaderboards,tokens,ai,vibe-coding

📂 Categoría: AI,Startups,Tech,leaderboards,tokens,ai,vibe-coding | 📅 Fecha: 1782717880

🔍 En este artículo:

Las clasificaciones de tokens tienen el problema de una buena idea y una mala ejecución, dice el director ejecutivo de una creciente startup de codificación de IA.

En un episodio del podcast «Founders» publicado el domingo, Scott Wu de Cognition dijo que hay mejores formas de incentivar a los empleados a utilizar la IA.

«Es una dirección decente, pero creo que definitivamente hay lugares donde la gente se ha dejado llevar», dijo Wu. «La gente dice: ‘Clasificamos a nuestros ingenieros según la cantidad de tokens que gastan’. » Bueno, intentemos clasificar a las personas según la cantidad que realmente producen. »

Cognition fue fundada en 2023 por Wu, Steven Hao y Walden Yan y es mejor conocida por Devin, un ingeniero de software de inteligencia artificial autónomo. La empresa con sede en San Francisco ha atraído el apoyo de inversores como Founders Fund, Khosla Ventures, Elad Gil y Pear VC. En mayo, recaudó más de mil millones de dólares para una valoración posterior a la financiación de 26 mil millones de dólares, lo que la convierte en una de las nuevas empresas de codificación de IA más valiosas del mundo.

En el podcast, Wu reconoció que la TI es cara. Pero añadió que si los ingenieros pudieran fabricar tres veces más productos que sin IA, “claramente valía la pena”.

Sin embargo, añadió que las empresas deben asegurarse de vincular las recompensas con métricas más bajas. Los resultados específicos podrían incluir la cantidad de tickets resueltos y cómo se puede abaratar y acelerar un proyecto.

Wu es el último líder tecnológico en criticar el tokenmaxxing: utiliza toneladas de herramientas de inteligencia artificial como Claude, Codex y Cursor para aumentar la productividad y adelantarse a los paneles y evaluaciones internas del uso de la inteligencia artificial.

A principios de este mes, el director de tecnología de la startup legal de IA Legora dijo que los empleados no deberían ser recompensados ​​solo por su uso de la IA.

«Muchas personas, por ejemplo, obtienen una clasificación y mencionan el uso de tokens durante las evaluaciones de desempeño», dijo Jacob Lauritzen en un podcast. «Esto lleva al tokenmaxxing, es decir, a que la gente queme tokens sólo para verse bien».

«Es una forma realmente estúpida de hacer cualquier cosa», añadió.

En una conferencia de Bloomberg este mes, Andrew Feldman, director ejecutivo de Cerebras Systems, dijo que la idea de dar a los empleados una cantidad ilimitada de tokens era «estúpida desde el principio».

«No necesitas un Ferrari para ir al supermercado, ¿verdad? Utiliza un modelo de código abierto menos costoso», dijo sobre ser más eficiente con los tokens. «Lo que estamos aprendiendo es cómo comprar en Costco».