Solo una reflexión: tal vez "bitstream" capture mejor la esencia que "token" cuando hablamos de arquitectura de IA. Y aquí está la cuestión: ¿por qué seguimos obsesionándonos con el conteo de parámetros? Los verdaderos cuellos de botella están justo delante de nosotros: capacidad de memoria, límites de ancho de banda y operaciones computacionales. El tamaño del archivo te dice mucho más sobre lo que realmente es factible. Deberíamos medir los modelos de IA por lo que los restringe físicamente, no por un número abstracto que parece impresionante en papel.