En este artículo se hace un análisis crítico de la Prueba de inglés ECAES 2009 del Ministerio de Educación Nacional. Esta prueba es una parte de la Prueba de competencias genéricas en la que se incluyen la Prueba de solución de problemas, la Prueba de pensamiento crítico, la Prueba de comprensión de lectura en español, entre otras. El análisis se basa en un marco teórico holístico y tiene en cuenta factores y conceptos clave como: los propósitos de la evaluación, la competencia comunicativa, el concepto de “efecto colateral” y el análisis de género aplicado. Se seleccionaron algunas muestras de las cuatro primeras partes de la prueba para examinar su estructura, qué se evalúa y cómo evalúa. También se realizó una comparación entre la Prueba de inglés y las restantes de la Prueba de competencias genéricas. Se concluye que la Prueba de inglés genera efectos negativos en los participantes, en los procesos y en los productos en la enseñanza y el aprendizaje de la lengua extranjera. Para superar esta situación actual de la prueba de inglés, que resulta desafortunada, se dan algunas recomendaciones que podrían producir efectos positivos.