Design and validation of an instrument for the evaluation of digital competence in Higher Education

Abstract

The objective is to present the results of the design and validation of the “Digital Campus” instrument, which assesses the level of development of digital competence in higher education students. It is based on the conceptual framework of digital competence and the revision of instruments to diagnose the level of development in this population. A questionnaire of 25 questions was designed and applied to 1,022 undergraduate students in 2017. With the method of Minimum Squares the validity of the instrument was demonstrated and with Pearson’s correlation coefficient it is shown that the dimensions of digital competence are independent. In the analysis of the items, an adequate performance of the instrument was evidenced, given that 66.7% of the items reached an average greater than half of the weight assigned for each item, with the highest performance in the Digital Citizenship dimension (88.9%) and the lowest performance in the Technological dimension. In the latter, it can be attributed that the analysis of the questions showed limitations in the index of difficulty and discrimination.

El objetivo es presentar los resultados del diseño y validación del instrumento “Campus Digital”, que evalúa el nivel de desarrollo de la competencia digital en estudiantes de Educación Superior. Se parte del marco conceptual de la competencia digital y de la revisión de instrumentos para diagnosticar el nivel de desarrollo en esta población. Se diseñó y aplicó un cuestionario de 25 preguntas a 1.022 estudiantes de pregrado en el 2017. Con el método de Mínimos Cuadrados se demostró la validez del instrumento y con el coeficiente de correlación de Pearson se muestra que las dimensiones de la competencia digital son independientes. En el análisis de los ítems se evidenció un adecuado desempeño del instrumento, dado que 66,7% de los ítems alcanzó un promedio superior a la mitad del peso asignado para cada ítem, con mejor desempeño en la dimensión de la Ciudadanía Digital (88,9%) y menor desempeño en la dimensión Tecnológica. En esta última, se puede atribuir que en el análisis de las preguntas se evidenciaron limitaciones en el índice de dificultad y de discriminación.