INTRODUCCIÓN. En una sociedad en transformación continua, comandada por las tecnologías de la información y la comunicación, se impone en los centros educativos la exigencia de una formación basada en competencias clave. Entre estas competencias, destacan aquellas relacionadas con el manejo de la información y la competencia digital. Ante la falta de herramientas válidas, concretas y adaptadas a la educación secundaria para la evaluación de competencias, y la alta demanda al respecto por parte del profesorado, se presenta un instrumento para la evaluación del nivel real en competencias informacionales de los estudiantes de educación secundaria y su validación bajo criterios científicos y estadísticos. MÉTODO. A partir de una muestra piloto de 285 estudiantes de educación secundaria de Castilla y León y Andalucía repartidos en 22 grupos docentes, se valida el instrumento desde la perspectiva de la Teoría de Respuesta al Ítem. RESULTADOS. Los resultados muestran niveles elevados de fiabilidad en las 4 dimensiones del instrumento y cómo las dimensiones de procesamiento y comunicación de la información muestran un mejor ajuste al modelo que las de búsqueda y evaluación. Asimismo, se implementa un análisis pormenorizado del ajuste de cada ítem en la estimación del nivel de habilidad de sujetos con habilidades medias y extremas. DISCUSIÓN. Se concluye señalando la necesidad en el desarrollo y mejora de este tipo de escalas, que contribuyen y facilitan la evaluación de competencias clave por parte del profesorado, aspecto que consideran deficitario en su formación de base. Se discute, igualmente, acerca del avance que supone este instrumento para la comunidad científica y educativa con respecto a los ya existentes anteriormente. Finalmente, se incide en las fortalezas y debilidades del instrumento y el procedimiento presentados y se apunta hacia algunas líneas de investigación que deja abiertas el presente proyecto.