LMARENA, una lista mundialmente reconocida de competición de grandes modelos, incluye todos los modelos que han encabezado la lista de modelos grandes desde mediados de 2023 A partir de GPT-4, el modelo solo puede permanecer en la posición número 1 durante unos 35 días de media. No es medio año, ni un año, más de un mes será superado por el nuevo modelo. Lo que está aún más exagerado es que muchas modelos salen del Top 5 unos 5 meses después de llegar a la cima, y es difícil incluso mantener el Top 10 en 7 meses. Un vistazo a ejemplos concretos será más impactante: O1, que antes era precioso, ahora está clasificado en el puesto #56; Claude 3 Opus, que en aquel entonces se consideraba el "modelo de razonamiento más fuerte", ha caído al #139 Todos solían ser: El modelo top está muy comentado y se considera un producto de "generación líder" Nadie puede estar en la cima de la lista durante mucho tiempo, y la ventana de ventaja se está comprimiendo a la unidad de "meses". Cuando el modelo puede ser superado por la siguiente generación en una media de 35 días, incluso supera el ciclo de iteración de algunos productos de IA... 😄 Esto podría significar algo clave: las capacidades básicas del modelo mejoran incluso más rápido que el ciclo de iteración de la mayoría de los productos. La capa de producto está "aplanada inversamente" según las capacidades del modelo.