El presente trabajo tiene el objetivo de construir, validar y aplicar un instrumento para evaluar las aptitudes clínicas de los médicos residentes de urgencias en el manejo de pacientes con enfermedad vascular cerebral. Se realizó un estudio observacional, autorizado por el comité de investigación en el que se evaluaron los 31 residentes de los tres grados de la especialidad de Urgencias de una de las sedes del Distrito Federal. Para la construcción del instrumento se emplearon tres casos clínicos reales de pacientes con enfermedad vascular cerebral. La validez del contenido se obtuvo por consenso 4 de 4 por expertos en urgencias e investigación educativa. Se realizó una prueba piloto en médicos internos de pregrado. La consistencia se determinó con la prueba de Kuder-Richardson. El instrumento validado se aplicó en una única sesión a ex profeso, y se determinaron las respuestas esperadas por azar a través de la prueba de Pérez-Padilla. Se utilizó un análisis estadístico no paramétrico. La versión final del instrumento se constituyó por 153 ítems distribuidos en 10 indicadores. La consistencia resultó de 0,92. La puntuación máxima fue de 124 y la mínima de 44. Se obtuvieron 25 respuestas esperadas por azar. El análisis estadístico no encontró diferencias entre los grados académicos. La mayoría de los residentes se ubicaron dentro del rango intermedio (41,93 %) y alto (25,80 %). En la mayoría de los indicadores los residentes de tercer año obtuvieron mejores calificaciones. Se concluyó que el instrumento construido tiene una adecuada confiabilidad. El proceso educativo en esta sede parece promover un proceso de reflexión y crítica por parte de los residentes.<br>The present paper was aimed at constructing, validating and applying an evaluation instrument for measuring clinical capacities of emergency residents in the management of patients suffering from a cerebrovascular disease. An observational study was made, under the authorization of the Research Committee, in which 31 residents of the three grades of Emergency specialty from one of the Federal District health institutions were tested. For the construction of the evaluating instrument, three real clinical cases of patients with cerebrovascular disease were taken. The contents was validated by consensus of 4 emergency and educational research experts. A pilot test was carried out with intern physicians. Consistency was determined by Kuder-Richardson test. The validated instrument was applied in a single session on purpose, and expected answers were determined by chance through Pérez-Padilla test. A non-parametric statistical analysis was also used. The final version of the instrument was made up of 153 items distributed into 10 indicators. Consistency was 0,92. The maximum score was 124 and the minimal was 44. Twenty five expected answers by chance were reached. The statistical analysis did not find any difference between academic grades. Most of the residents were within the intermediate (41,93 %) and high (25,80 %) ranges. In the majority of indicators, 3 rd year residents had better qualifications. It was concluded that the constructed instrument has suitable reliability. The educational process in this hospital seems to promote a process of reflection and criticism on the part of the residents.