Este articulo presenta los resultados parciales de un estudio realizado en el ano 2002 para determinar la validez y confiabilidad de un instrumento para medir el desempeno oral de estudiantes de Ingles en el Centro de Idiomas de la Universidad Eafit. La validez se estimo mediante procesos empiricos y logicos. Los resultados indican la necesidad de definir claramente la habilidad que se quiere medir, especificar los criterios y puntajes de evaluacion y contar con evaluadores que comprendan adecuadamente los aspectos a medir. La confiabilidad se midio a traves de correlaciones y analisis de varianza. Los resultados sugieren que es posible obtener consistencias en los puntajes de varios evaluadores cuando la herramienta de evaluacion es bien disenada y cuando se ha entrenado a los evaluadores.