Mercury 2.5 ha captado la atención por su significativa velocidad de inferencia, alcanzando un punto de referencia de 770 tokens por segundo. Este rendimiento lo posiciona como una opción de alta velocidad en el panorama de los modelos de lenguaje de gran tamaño (LLM), donde la generación rápida de tokens es una métrica clave para aplicaciones en tiempo real. Sin embargo, el principal atractivo del modelo —su velocidad— conlleva una notable concesión en el rendimiento cognitivo. Según los datos de la fuente, Mercury 2.5 se caracteriza por tener una inteligencia 'por debajo del promedio', funcionando a menudo peor que modelos más pequeños y capaces, como GPT-OSS-20B o varios modelos de 14B parámetros.

Los usuarios y observadores han planteado interrogantes sobre la aplicación práctica de un modelo que prioriza la velocidad sobre la precisión. Un comentarista señaló que la inteligencia del modelo es significativamente inferior a las ofertas de IA de vanguardia, sugiriendo que la alta velocidad puede no compensar la falta de capacidad de razonamiento. También se destacaron limitaciones técnicas específicas, como la dificultad del modelo con tareas complejas como la llamada a herramientas (tool calling). Además, algunos usuarios expresaron escepticismo respecto al enfoque de 'diffusion LLM' utilizado por el modelo, sugiriendo que podría no representar una 'frontera de Pareto' viable, un estado en el que no se pueden realizar más mejoras en la velocidad sin sacrificar la inteligencia.

Cuando se compara con otras alternativas de alta velocidad, Mercury 2.5 enfrenta una competencia feroz. Por ejemplo, se informa que el modelo Cerebras gpt-oss-120b alcanza velocidades de 1400 tokens por segundo, aunque ha sido criticado por estar 'roto' en la llamada a herramientas y por tener altos costos operativos. Adicionalmente, algunos usuarios señalaron que el precio de Mercury 2.5 (de $0.25 a $0.75) puede ser menos competitivo que otros modelos de pesos abiertos como DeepSeek v4 Flash o Qwen 3.8-flash-next, que pueden servirse de manera más económica manteniendo una mayor inteligencia. Estos factores dejan una pregunta abierta sobre si Mercury 2.5 sirve a un nicho único o si su velocidad se ve eclipsada por sus limitaciones de rendimiento.