¹Universidad Estatal de Milagro (UNEMI), Milagro, Guayas - Ecuador, CP 091050

²Universidad Estatal de Bolívar (UEB), Bolivar – Ecuador, CP 020150

jcordovam@unemi.edu.ec

Resumen

Este artículo presenta los resultados de la evaluación de la calidad de los sitios web oficiales de las 62 universidades y escuelas politécnicas del Ecuador. El estudio es de tipo exploratorio, correlacional y de corte transversal, y analiza la estructura, el diseño, la información y las herramientas dispuestas en los sitios web oficiales de estas instituciones a través del análisis de contenido. La metodología aplicada inicia con una exhaustiva revisión bibliográfica sobre herramientas, métodos y técnicas para evaluar la calidad de los sitios web, a partir de esta revisión se construyó una herramienta heurística formada por 55 indicadores de calidad, que verifican la existencia y funcionalidad de las características propias de los sitios web. Para el procesamiento de datos, se empleó la técnica del Análisis de Componentes Principales a través del lenguaje de programación R, esto permitió identificar 6 componentes principales que explican el 53,85% de la variabilidad de los datos. Además, con la generación de gráficos HJ-Biplot, se logró explorar las correlaciones de los indicadores de calidad de manera gráfica y comparar las similitudes y diferencias de los sitios web analizados, así también, se logró identificar áreas de excelencia y los aspectos que requieren mejoras en el diseño de estas plataformas. Los resultados alcanzados subrayan que un diseño web bien pensado se distingue por ser intuitivo y funcional, lo que mejora de manera considerable la imagen digital y la reputación de la Institución de Educación Superior. Así mismo, se evidencia que las instituciones con sitios web mejor valorados, transmiten una mayor confianza institucional y generan una mayor satisfacción entre los estudiantes, lo que demuestra que existe una relación positiva entre un diseño web de calidad y la percepción positiva de la institución.

Palabras clave: Calidad web, Análisis de Componentes Principales (ACP), Graphics HJ-Biplot.

Abstract

This article presents the results of the evaluation of the quality of the official websites of 62 universities and polytechnic schools in Ecuador. The study is exploratory, correlational, and cross-sectional, and analyzes the structure, design, information, and tools available on the official websites of these institutions through content analysis. The methodology begins with an extensive literature review on tools, methods, and techniques to assess website quality. Based on this review, a heuristic tool was developed consisting of 55 quality indicators that verify the existence and functionality of the essential features of the websites. Data processing was carried out using the Principal Component Analysis (PCA) technique with the R programming language, which allowed the identification of six main components explaining 53.85% of the data variability. Additionally, the generation of HJ-Biplot charts enabled the graphical exploration of the correlations between the quality indicators and the comparison of the similarities and differences of the websites analyzed. This also helped identify areas of excellence and aspects that require improvement in the design of these platforms. The results highlight that a well-thought-out web design is characterized by being intuitive and functional, which significantly enhances the digital image and reputation of higher education institutions. Furthermore, it is evident that institutions with better-rated websites convey greater institutional trust and generate higher satisfaction among students, demonstrating a positive relationship between quality web design and a positive perception of the institution

Keywords: Web quality, Principal Component Analysis (PCA), HJ-Biplot charts.

1. Introducción

Los sitios web oficiales de las Universidades representan un elemento de reconocimiento, prestigio y posicionamiento en el entorno digital y la sociedad del conocimiento [1]. Estas plataformas de comunicación digital deben responder a las necesidades y demandas de la comunidad académica y de la ciudadanía en general, puesto que se busca que estas herramientas de comunicación, se conviertan en potentes medios de difusión y socialización de la estructura educativa y administrativa, de la oferta académica y formativa, de los proyectos de investigación y de vinculación, así como de la promoción de eventos académicos, científicos, culturales y sociales [2].

Por lo expuesto, se puede afirmar que los sitios web oficiales de las Instituciones de Educación Superior del Ecuador (IES), son herramientas fundamentales para la imagen y compromiso de una institución representar en el mundo digital, así como para garantizar la accesibilidad y difusión del conocimiento [3],[4]. En este contexto, la revisión de la literatura ha permitido identificar numerosas publicaciones de varios autores que han trabajado aspectos relacionados con la evaluación de la calidad, la usabilidad y la efectividad de los sitios web [5]. La calidad web se refiere al grado en que las aplicaciones web cumplen con las expectativas y requisitos del usuario [6]. Un claro ejemplo es el aporte de Macakoğlu et al., quienes determinaron la existencia de patrones comunes y problemas relacionados con la experiencia de usuario y navegabilidad en los sitios web de universidades de América del Norte, Europa y Oceanía, su trabajo trata de establecer los niveles de accesibilidad de estos sitios web, a partir de los datos proporcionados por aspirantes a estas universidades, sin distinguir aspirantes con necesidades especiales [7].

De igual forma, Akgül señaló que los sitios web de varias universidades turcas son visualmente atractivos y ofrecen contenido significativo, sin embargo, presentan fallas en cuanto a la accesibilidad para estudiantes con discapacidad, esta limitación se debe a que la accesibilidad no ha sido considerada como un criterio fundamental durante el diseño de estas plataformas, lo que restringe el acceso de algunos estudiantes a los recursos educativos y genera una brecha digital [8]. Por otro lado, los estudios de Wahyuningrum et al. acerca de las interacciones, comportamientos y consumo de información de los usuarios del sitio web de la National University of East Timor (Timor-Leste), identificaron cambios en los patrones de búsqueda y consumo de la información durante la pandemia del COVID-19 y resaltaron la importancia de la calidad de este sitio web para garantizar la continuidad educativa [9].

También es relevante mencionar el trabajo de Hai y Nguyen, quienes evaluaron la calidad de los sitios web de universidades vietnamitas, a través del análisis de las percepciones de los estudiantes y de métricas de calidad web. Los resultados de esta evaluación sostienen que un sitio web bien diseñado, intuitivo y funcional puede mejorar la imagen y reputación de la universidad. Además, los autores descubrieron una alta correlación entre la calidad el sitio web, el nivel de confianza y la satisfacción de los estudiantes [10]. En este contexto, es importante mencionar que los resultados de la revisión sistemática de la literatura de Saleh et al. sobre los criterios y metodologías para evaluar los sitios web, evidencian la necesidad de establecer una metodología unificada para evaluar la calidad de estos recursos digitales, con el fin de garantizar la robustez del proceso y facilitar comparaciones en futuras investigaciones[11].

Finalmente, Rashida et al. desarrollaron una herramienta con un enfoque holístico, para evaluar la calidad de los sitios web universitarios que considera aspectos técnicos y funcionales de estas plataformas. Esta metodología evalúa la efectividad del sitio, la experiencia del usuario y la coherencia del contenido. Esta herramienta versátil ofrece una comprensión profunda sobre la calidad de los sitios web universitarios, lo que permite identificar aspectos potenciales de mejora [12]. La información expuesta resalta la necesidad de que las universidades y escuelas politécnicas mantengan y mejoren la calidad de sus sitios web. Así mismo, destaca la importancia de desarrollar y validar herramientas, técnicas y metodologías que permitan evaluar dicha calidad con un enfoque holístico y objetivo, todo esto para identificar problemas de diseño y estructura e implementar planes de mejora eficaces.

2. Materiales y Métodos

Metodologías para la evaluación de la calidad Web

La revisión de la literatura ha permitido determinar que no existe un único modelo para evaluar la calidad de un sitio web. Los aportes de Rodríguez-Martínez et al. [13], de Fernández-Cavia y Vinyals-Mirabent [14], de Morales-Vargas et al. [15] y de Martínez-Sanz y Berrocal-Gonzalo [16], describen y validan varias metodologías de evaluación de sitio web. Estas metodologías utilizan parámetros e indicadores agrupados en factores o criterios específicos que permiten cuantificar la calidad de un sitio web. La presente propuesta de evaluación se basa en el Sistema Articulado de Análisis de Plataformas Web [13] y el Índice de Calidad Web [14].

Este trabajo de investigación presenta la construcción e implementación de una herramienta heurística para evaluar la calidad de los sitios web de las IES del Ecuador, se trata de una herramienta construida a partir de la revisión sistemática de la literatura y la colaboración de expertos en esta área de conocimiento[17]. La herramienta pretende evaluar siete áreas que representan aspectos generales de los sitios web. Las áreas consideradas para evaluar son: Accesibilidad y Servicios, Información, Contenido Académico, Multimedia, Comunidad, Redes Sociales y Comunicación [18], a través de 22 parámetros que examinan distintos aspectos de las áreas mencionadas, con la aplicación de 55 indicadores diseñados para evaluar la presencia y funcionalidad de herramientas, recursos y contenido de los sitios web, lo que permite cuantificar la calidad del sitio de manera exhaustiva y meticulosa [19]. En este contexto, la herramienta propuesta sirve como filtro inicial para evaluar características específicas en los sitios web de las IES, dado que los indicadores utilizados registran datos cualitativos que permiten conocer las fortalezas y debilidades del diseño web utilizado por cada institución de educación superior [20].

Calidad de los sitios web de las universidades ecuatorianas

Los sitios web para este estudio fueron seleccionados a partir de la lista oficial de las universidades y escuelas politécnicas acreditadas por el Consejo de Educación Superior del Ecuador (CES). En total se han considerado los sitios web oficiales de 62 IES, se ha empleado la técnica del análisis de contenido para verificar la presencia y funcionalidad de los recursos propios de estas plataformas a través de la evaluación de los indicadores de calidad de la herramienta propuesta.

Los datos analizados en este estudio provienen de la evaluación de 55 indicadores de calidad incluidos en la herramienta heurística propuesta. Se llevó a cabo un análisis exhaustivo de los sitios web oficiales de las Universidades y Escuelas Politécnicas acreditadas por el CES, utilizando la técnica de análisis de contenido. Durante este proceso, se verificó la existencia y funcionalidad de los elementos y herramientas considerados en el estudio. Los resultados de la evaluación de cada indicador se registraron en una matriz, asignando un valor de 0 a aquellos indicadores correspondientes a herramientas inexistentes o con fallas. Este procedimiento se implementó con el objetivo de garantizar la validez de los datos para su posterior procesamiento y análisis estadístico.

El análisis estadístico de los datos se llevó a cabo mediante la técnica de Análisis de Componentes Principales (PCA), teniendo en cuenta a las universidades como puntos de datos y a los indicadores de evaluación como variables de estudio. Así mismo, se utilizó el lenguaje R para procesar los datos recolectados, haciendo uso de bibliotecas especializadas como: Corroplot, Nbclust, Openxlsx, Cluster, Dolyr, Psych, Ggplot2, Factoextra, y Nortest, lo que facilitó el análisis y la visualización de los resultados.

Los resultados iniciales determinaron que las variables poseen una estructura adecuada para la aplicación de la técnica del PCA, puesto que se obtuvieron resultados satisfactorios de la prueba de Kaiser-Meyer Olkin y la prueba de esfericidad de Bartlett. Lo que justifica el uso de la Rotación Promax, puesto que los factores exhiben ortogonalidad entre sí.

La Tabla 1 muestra los resultados del análisis de componentes principales, los valores propios de cada componente y los porcentajes de variación explicados. Así mismo, muestra la variación acumulada para evaluar la calidad general de los sitios web. En concordancia con el criterio de Kaiser, se han seleccionado los 6 primeros componentes, dado que sus valores propios son mayores o iguales a 1 (ver Fig. 1) y en conjunto representan el 53,96% de la varianza explicada en los datos del estudio.

La Tabla 2 describe los indicadores que representan las contribuciones más significativas a los componentes identificados, Los códigos asignados a estos indicadores delimitan el campo, el parámetro y el número de indicador que representan.

La Tabla 3 muestra los resultados del análisis de componentes principales de los indicadores de calidad de las universidades, en términos absolutos.

A continuación, se realizó un análisis Bi-plot con el conjunto seleccionado de componentes descritos en la Tabla 3. Para ello se han considerado los tres primeros componentes, puesto son los que más contribuyen a explicar la varianza de los datos. Además, se incluye una escala de colores según la contribución del componente, en la que el color naranja representa la mayor contribución y el color azul indica la más baja.

En la Fig. 2 se pueden observar las dimensiones 1 y 2, las que explican el 21,6% de la variabilidad acumulada. Lo que significa que un grupo concreto de instituciones predomina en términos de su influencia en estas dos dimensiones. Los sitios web de estas instituciones [UTB, UTMACH, UTA, UTM, UDR, UTN, UCG, ECOTEC, UDA] destacan por los buenos resultados en la evaluación de indicadores de específicos calidad, entre ellos se encuentran la efectividad del sistema y los criterios aplicados para el registro de usuarios, la diversidad de oferta formativa, la facilidad de acceso a los métodos de contacto y la disponibilidad de recursos para compartir contenido en internet.

Así mismo, en la Fig. 3 se puede visualizar el gráfico Bi-plot para las dimensiones 1 y 3. Estas dimensiones explican el 21% de la variabilidad total de los datos. La importancia de estas instituciones [UARTES, UPACÍFICO, UTM, EPN, UDR, UTN, UBE, UTELVT] en el contexto de este análisis, se manifiesta a través de la presencia y el rendimiento de varios indicadores en sus sitios web. Estos indicadores incluyen el sistema de registro de usuarios y los parámetros asociados, las herramientas que permiten ajustar el tamaño del texto, las opciones para personalizar el aspecto visual del sitio y el formato para mostrar directorios.

De manera similar, la Fig. 4 muestra un gráfico Bi-plot que representa la intersección de las dimensiones 2 y 3, las cuales explican el 20% de la variabilidad total. Los sitios web de estas instituciones [UDA, UAE, UTB, UTMACH, UCSG, UASB, ECOTEC] destacan por la inclusión de herramientas para el ajuste del tamaño de fuente, las opciones de adaptación visual para los usuarios y la organización eficiente de los directorios en línea. Además, estos sitios web incluyen información completa sobre la oferta formativa, los métodos de contacto y cuentan con funciones para compartir contenido en la web.

Para complementar el análisis de los datos, se presenta un gráfico HJ Biplot, que muestra la clasificación de los sitios web analizados en grupos basados en los resultados de los indicadores de calidad web utilizados. Este análisis agrupa a las IES en dos conjuntos mutuamente excluyentes. El Grupo 1 (color rosa) corresponde a universidades que necesitan mejorar la estructura, diseño o funcionalidad de sus sitios web puesto que no obtuvieron buenos resultados en esta evaluación. Mientras que las instituciones del Grupo 2 (color azul) han alcanzado los mejores resultados en esta evaluación.

3. Resultados y Discusión

Los resultados presentados son preliminares y buscan explicar el alcance del uso de técnicas de análisis estadístico multivariante para determinar los indicadores de evaluación más relevantes para evaluar la calidad de los sitios web. La metodología aplicada utiliza la técnica del análisis de componentes principales para procesar las mediciones de los 55 indicadores utilizados, todo esto con el fin de identificar los componentes que pueden explicar de manera significativa la varianza observada [21]

Se han logrado identificar diferencias significativas en la presencia digital de las instituciones analizadas, la aplicación del análisis multivariante como metodología de estudio está respaldada por investigaciones previas, como las de Susanto et al. [22], quienes destacan la importancia de la calidad web de las instituciones educativas, la evaluación de estos sitios y los factores que afectan los niveles de calidad. Complementando este aporte, la presente investigación incluye valiosos indicadores como la accesibilidad, la calidad del contenido y la eficacia de la comunicación interactiva [23]. Lo que aporta una amplia visión sobre los procesos de optimización de los sitios web universitarios.

En este contexto, varios estudios justifican el desarrollo de la herramienta heurística utilizada en esta investigación [1],[24]. El uso de este tipo de herramientas, facilita la evaluación de la calidad de los sitios web universitarios, a través de indicadores, parámetros y campos [25]. Los indicadores validan la presencia y el correcto funcionamiento de los recursos digitales, con marcada atención en herramientas como la opción de cambiar el idioma del sitio, la pronta y adecuada respuesta del correo de contacto oficial, la pertinencia de los resultados y la capacidad de personalizar la herramienta de búsqueda en el sitio web. Estos criterios resaltan la importancia de la comunicación interactiva como parámetro clave de calidad para los sitios web de instituciones educativas [26], puesto que pueden satisfacer las necesidades informativas de la comunidad universitaria.

Por otro lado, la accesibilidad se presenta como una tarea pendiente en el diseño de los sitios web de las IES del Ecuador. Los resultados de las evaluaciones muestran la necesidad urgente de establecer procedimientos y herramientas que atiendan la diversidad y empleen recursos digitales adaptados a las necesidades concretas de estudiantes, profesores, administrativos y usuarios en general. Todo esto con el fin de garantizar el acceso a la información en el formato más adecuado [27],[28].

4. Conclusiones

Este trabajo de investigación describe los resultados de un análisis profundo sobre la calidad de los sitios web de las universidades y escuelas politécnicas del Ecuador, para lo cual, se ha empleado un enfoque integral que parte del desarrollo de una herramienta heurística para evaluar la calidad de estos sitios web e integra la técnica del análisis de componentes principales para el procesamiento de la información. Los resultados, destacan una elevada variación en la calidad de los sitios web oficiales de las IES ecuatorianas y reafirman la importancia que la presencia en línea influye en la reputación y percepción institucional.

La aplicación de la técnica Análisis de Componentes Principales, permitió reducir la complejidad de los 55 indicadores de calidad web, identificando seis componentes principales que explican una proporción sustancial de la variabilidad observada. Esta información aporta claridad sobre los factores clave que influyen en la calidad del sitio web y proporciona un marco más eficiente para futuras evaluaciones. Así mismo, se ha determinado que un diseño web intuitivo y funcional mejora la imagen digital de la institución e influye positivamente en la confianza y satisfacción de los estudiantes. Además, la incorporación de criterios de calidad como la accesibilidad, la usabilidad y la interactividad, es fundamental para la creación de plataformas digitales eficaces y eficientes.

Este estudio contribuye de manera significativa a la literatura existente, puesto que introduce un método novedoso y detallado para evaluar la calidad web en el sector educativo. No obstante, se reconoce la necesidad de elaborar un marco común unificado para la evaluación de la calidad web, lo que crea nuevas oportunidades para futuras investigaciones. Así mismo, incorporar al estudio indicadores de desempeño institucional, como la retención estudiantil, la tasa de graduaciones, la reputación científica o las tasas de éxito académico, podría generar nuevos espacios de diálogo científico y oportunidades de investigación.

Financiamiento

Esta investigación forma parte del proyecto de investigación C20-SI-02. Calidad, características y posicionamiento de los sitios web oficiales de las universidades del Ecuador, financiado por la Universidad Estatal de Milagro- Ecuador.

Conflicto de intereses

No existen conflictos de intereses entre los autores.

Taxonomía de Roles de Contribuyente

Bajo los lineamientos CRediT (Taxonomìa de Roles de Contribuyentes), los autores dan fe de las contribuciones realizadas al trabajo de investigación, que se detallan: Jorge Córdova: visualización, redacción, administración del proyecto, adquisición de financiación, recursos, software, análisis, conducción, metodología. Silvia Pacheco: revisión, validación, supervisión, adquisición de financiación, recursos, conducciòn, curaciòn de datos, moetodologìa, conceptualizaciòn.

5. Referencias

1. MONTERO ESTEVA, Amelie; CASTILLO DÍAZ, Ana; RODRÍGUEZ RODRÍGUEZ, Aline Marie. Sedes webs de las universidades cubanas. Análisis de su presencialidad en internet. En: Vivat Academia. Revista de Comunicación [en línea], 2021, Nº. 154, pp. 41–67. Disponible en: https://doi.org/10.15178/va.2021.154.e1364.

2. SÁNCHEZ HERVÁS, David. La reputación corporativa en la comunicación de las instituciones universitarias españolas a través de sus sitios webs. Tesis del programa de Doctorado en Dirección de Comunicación, Universidad Católica de Murcia [en línea], 2017. Disponible en: http://repositorio.ucam.edu/handle/10952/2635.

3. ACOSTA-VARGAS, Patricia; LUJAN-MORA, Sergio; SALVADOR-ULLAURI, Luis. Quality evaluation of government websites. En: 2017 Fourth International Conference on eDemocracy & eGovernment (ICEDEG). IEEE [en línea], 2017, pp. 8–14. Disponible en: https://doi.org/10.1109/ICEDEG.2017.7962507.

4. WEST, Joyce; MALATJI, Makwalete. Technology Integration in Higher Education: The use of Website Design Pedagogy to Promote Quality Teaching and Learning. En: Electronic Journal of E-Learning [en línea], 2021, Vol. 19, Nº. 6, pp. 629–641. Disponible en: https://doi.org/10.34190/ejel.19.6.2557.

5. MORALES-VARGAS, Alejandro. Web quality studies for the education sector. En: Digicom 2019 – 3rd International Conference on Design and Digital Communication. IPCA - Instituto Politécnico do Cávado e do Ave [en línea], 2019, pp. 235–244. Disponible en: http://hdl.handle.net/10230/43286.

6. GARCÍA, Boni. Contribution to the automation of software quality control of web applications. Tesis del programa de Doctorado en Ingeniería Telemática, Universidad Politécnica de Madrid, [online], 2011. Disponible en: https://doi.org/10.20868/UPM.thesis.9017.

7. MACAKOĞLU, Şevval Seray; PEKER, Serhat; MEDENI, Ihsan Tolga. Accessibility, usability, and security evaluation of universities’ prospective student web pages: a comparative study of Europe, North America, and Oceania. En: Universal Access in the Information Society, [online], 2023, Vol. 22, Nº. 2, págs. 671–683. Disponible en: https://doi.org/10.1007/s10209-022-00869-9.

8. AKGÜL, Yakup. Accessibility, usability, quality performance, and readability evaluation of university websites of Turkey: a comparative study of state and private universities. En: Universal Access in the Information Society, [online], 2021, Vol. 20, Nº. 1, págs. 157–170. Disponible en: https://doi.org/10.1007/s10209-020-00715-w.

9. WAHYUNINGRUM, Tenia; KARTIKO, Condro; WARDHANA, Ariq Cahya; GOMES SOARES, Teotino. Revised web impact factor analysis of Timor Leste University website during COVID-19 pandemic. En: Bulletin of Electrical Engineering and Informatics, [online], 2021, Vol. 10, Nº. 3, págs. 1678–1686. Disponible en: https://doi.org/10.11591/eei.v10i3.3034.

10. DUC HAI, Luu Thanh; NGHI NGUYEN, Quoc. The influence of website quality on brand trust and satisfaction of students: A case study of universities in Vietnam. En: International Journal of Data and Network Science, [online], 2022, Vol. 6, Nº. 4, págs. 1403–1412. Disponible en: https://doi.org/10.5267/j.ijdns.2022.5.011.

11. SALEH, Ala' Hasan; YUSOFF, Rasimah Che Mohd; BAKAR, Nur Azaliah Abu; IBRAHIM, Roslina. Systematic literature review on university website quality. En: Indonesian Journal of Electrical Engineering and Computer Science, [online], 2022, Vol. 25, Nº. 1, págs. 511–520. Disponible en: https://doi.org/10.11591/ijeecs.v25.i1.pp511-520.

12. RASHIDA, Maliha; ISLAM, Kawsarul; KAYES, A.S.M.; HAMMOUDEH, Mohammad; AREFIN, Mohammad Shamsul; HABIB, Mohammad Ashfak. Towards Developing a Framework to Analyze the Qualities of the University Websites. En: Computers, [online], 2021, Vol. 10, Nº. 5, pág. 57. Disponible en: https://doi.org/10.3390/computers10050057.

13. RODRÍGUEZ-MARTÍNEZ, Ruth; CODINA, Luis; PEDRAZA-JIMÉNEZ, Rafael. Indicadores para la evaluación de la calidad en cibermedios: análisis de la interacción y de la adopción de la Web 2.0. En: Revista Española de Documentación Científica, [online], 2012, Vol. 35, Nº. 1, págs. 61–93. Disponible en: https://doi.org/10.3989/redc.2012.1.858.

14. FERNÁNDEZ-CAVIA, José; VINYALS MIRABENT, Sara; LÓPEZ PÉREZ, Marina. Calidad de los sitios web turísticos oficiales de las comunidades autónomas españolas. En: Bid, 2013. Disponible en: http://bid.ub.edu/es/31/fernandez2.htm.

15. MORALES-VARGAS, Alejandro; PEDRAZA-JIMÉNEZ, Rafael; CODINA, Luis. Calidad en sitios web: análisis de la producción científica. En: El Profesional de la Información, [online], 2020, Vol. 29, Nº. 5. Disponible en: https://doi.org/10.5281/zenodo.4029628.

16. MARTÍNEZ-SANZ, Raquel; BERROCAL-GONZALO, Salomé. Museos y engagement. La calidad de los espacios web como soporte del compromiso. En: Revista Española de Documentación Científica, [online], 2017, Vol. 40, Nº. 1, págs. 66–e166. Disponible en: https://doi.org/10.3989/redc.2017.1.1383.

17. SINGLA, Bhim Sain; AGGARWAL, Himanshu. A Set of Usability Heuristics and Design Recommendations for Higher Education Institutions’ Websites. En: International Journal of Information System Modeling and Design, [online], 2020, Vol. 11, Nº. 1, págs. 58–73. Disponible en: https://doi.org/10.4018/IJISMD.2020010104.

18. CORDOVA-MORAN, Jorge; FREIXA, Pere. Estrategias de comunicación digital interactiva en la promoción de los 10 principales destinos turísticos de América Latina. En: VI Congreso Internacional de la AE-IC. ‘Comunicación y conocimiento’, [online], 2015 (s. 249). Disponible en: https://ae-ic.org/publicaciones-del-congreso-salamanca-2018/.

19. CARDENOSO DOMINGO, José María; CUESTA FERNANDEZ, Josefa; AZCARATE GODED, Pilar. A tool for analyzing the practical activities in initial training of secondary teachers of science and mathematics from the perspective of sustainability. En: Revista Eureka Sobre Enseñanza y Divulgación de las Ciencias, [online], 2015, Vol. 12, Nº. 1, págs. 109–129. Disponible en: https://doi.org/10.25267/Rev_Eureka_ensen_divulg_cienc.2015.v12.i1.08.

20. MUKHERJEE, Ashis; GILBERT, Klein. Lagrangian heuristics for instructor scheduling in executive development programmes. En: Journal of the Operational Research Society, [online], 1997, Vol. 48, Nº. 4, págs. 373–382. Disponible en: https://www.tandfonline.com/doi/abs/10.1057/palgrave.jors.2600368.

21. TREJOS HILARIÓN, Joseph Leandro; BARAHONA RODRÍGUEZ, César Yesid. Aplicación del análisis multivariado de datos en un sistema basado en la web para la medición del índice de inclusión social en una institución de educación superior. En: Revista INCAING, [online], 2022, Vol. 5, Nº. 33, págs. 19–24. Disponible en: http://ojs.incaing.com.mx/index.php/ediciones/article/view/152.

22. SUSANTO, Aries; RAHMAINI, Safira Nur; PUTRA, Syopiansyah Jaya; MINTARSIH, Fitri. Evaluating Web Quality and Its Influential Factors in Higher Education: A Comparative Study. En: 2019 7th International Conference on Cyber and IT Service Management (CITSM), [online], 2019, págs. 1–5. Disponible en: https://doi.org/10.1109/CITSM47753.2019.8965360.

23. SEGURA-MARIÑO, Adriana Graciela; PIÑEIRO-NAVAL, Valeriano; MOREIRA-CEDEÑO, Cristhian Marcelo. Methodology to evaluate institutional communication on university websites. En: Estudios Sobre el Mensaje Periodístico, [online], 2021, Vol. 26, Nº. 3, págs. 1217–1228. Disponible en: https://doi.org/10.5209/ESMPÁGS.65418.

24. TARDÍO-CRESPO, Victor; ÁLVAREZ-ÁLVAREZ, Carmen. Analysis of the websites of public secondary schools of Cantabria (Spain). En: REICE - Revista Iberoamericana Sobre Calidad, Eficacia y Cambio en Educación, [online], 2018, Vol. 16, Nº. 3, págs. 49–65. Disponible en: https://doi.org/10.15366/reice2018.16.3.003.

25. MORALES-VARGAS, Alejandro; PEDRAZA-JIMENEZ, Rafael; CODINA, Luis. Website quality in digital media: literature review on general evaluation methods and indicators and reliability attributes. En: Revista Latina de Comunicación Social, [online], 2022, Vol. 80, págs. 39–63. Disponible en: https://doi.org/10.4185/RLCS-2022-1515.

26. AKDAG, Sahin; BICEN, Huseyin; BASARI, Gülsün y SAVASAN, Ahmet. The impact of using social media on university students socialization: statistical reasoning. En: 13th International Conference on Theory and Application of Fuzzy Systems and Soft Computing—ICAFS-2018-13. Springer International Publishing, [online], 2019, págs. 404–409. Disponible en: https://doi.org/10.1007/978-3-030-04164-9_54.

27. CASASOLA BALSELLS, Luis Alejandro; GUERRA GONZÁLEZ, Juan Carlos; CASASOLA BALSELLS, María Araceli y PÉREZ CHAMORRO, Vicente Antonio. La accesibilidad de los portales web de las universidades públicas andaluzas. En: Revista Española de Documentación Científica, [online], 2017, Vol. 40, Nº. 2. Disponible en: https://doi.org/10.3989/redc.2017.2.1372.

28. NARANJO-VILLOTA, Darwin; GUAÑA-MOYA, Javier; ACOSTA-VARGAS, Patricia y MUIRRAGUI-IRRAZÁBAL, Viena. Evaluación de la accesibilidad web en institutos acreditados de educación superior del Ecuador. En: Revista Espacios, [online], Vol. 41, Nº. 4. Disponible en: https://www.revistaespacios.com/a20v41n04/20410405.html.

29. SHAYGANMEHR, Masoud y MONTAZER, Gholam Ali. Identifying Indexes Affecting the Quality of E-Government Websites. En: 2019 5th International Conference on Web Research (ICWR-2019), [online], 2019, págs. 167–171. Disponible en: https://doi.org/10.1109/ICWR.2019.8765293.

30. HIDAYAH, Nur Aeni; SUBIYAKTO, A'ang y SETYANINGSIH, Fani. Combining Webqual and Importance Performance Analysis for Assessing A Government Website. En: 2019 7th International Conference on Cyber and IT Service Management (CITSM 2019), [online], 2019. Disponible en: https://doi.org/10.1109/CITSM47753.2019.8965408.

31. NAJADAT, Hassan; AL-BADARNEH, Amer y ALODIBAT, Sawsam. A Review of Website Evaluation Using Web Diagnostic Tools and Data Envelopment Analysis. En: Bulletin - British Society for Middle Eastern Studies, British Society for Middle Eastern Studies, [online], 2021, Vol. 10, Nº. 1. Disponible en: https://doi.org/10.11591/eei.v10i1.1755.