Dimensiones de la evaluación de universidades según escalas de valoración: Percepción de los expertos latinoamericanos

Autores/as

DOI:

https://doi.org/10.31637/epsir-2024-1679

Palabras clave:

Gobernanza universitaria, Rankings, Instituciones de educación superior, Dimensiones del desempeño, Evaluación educativa, Educación Superior, Políticas públicas, Universidades

Resumen

Introducción: Los índices académicos para evaluar universidades han surgido en la educación superior para satisfacer la demanda de información y fomentar la transparencia, aunque también han generado críticas. Este estudio explora la percepción de expertos de universidades latinoamericanas sobre las dimensiones empleadas en estos rankings, con el fin de orientar futuras propuestas. Metodología: La investigación es de carácter descriptivo y enfoque cuantitativo. Se analizaron metodologías de trece clasificaciones y se aplicó un cuestionario con escala Likert a 712 participantes de 13 países de América Latina. Resultados: Los encuestados valoraron positivamente las dimensiones evaluadas, aunque hubo variaciones significativas según el rol jerárquico y el país de origen. Los académicos priorizan menos la investigación frente a los directivos intermedios, y se encontraron diferencias notables, especialmente en Argentina. Conclusiones: Las percepciones sobre los rankings varían considerablemente según la posición y el contexto nacional, lo que sugiere la necesidad de adaptar los criterios de evaluación a las realidades regionales para mejorar la relevancia de estos índices en Latinoamérica.

Descargas

Los datos de descargas todavía no están disponibles.

Biografía del autor/a

Juan Bautista Abello Romero, Universidad de Santiago de Chile

Doctor en Ciencias de la Administración y Magíster en Ciencias de la Administración de la Universidad de Santiago, y DEA en Administración de la Universidad de Sevilla. Académico del departamento de contabilidad y auditoría.

Patricio Viancos-González, University of Tarapacá

Doctor en Política y Gestión educativa de la Universidad de Playa Ancha de Ciencias de la educación. Administrador Público y Licenciado en Administración Pública por la Universidad de Valparaíso. Actualmente es investigador de la Universidad de Tarapacá, Chile. Integrante de la red de investigadores de gobernanza universitaria y del IESED-Chile.

Walter Saéz-San Martin, University of Tarapacá

Doctorando en Política y Gestión de la Educación Superior en la Universidad Nacional de Tres de Febrero (Argentina), con títulos de Administrador Público y Licenciado en Administración Pública de la Universidad de Valparaíso (Chile). Asistente de investigación en la Universidad de Tarapacá y en el Fondecyt Regular Nº1220740 de la Universidad de Santiago de Chile. Trabaja en líneas de investigación sobre rankings universitarios, aseguramiento de la calidad y gobernanza universitaria.

Luis Andrade Ríos, Universidad del Alba

Sociólogo por la Pontificia Universidad Católica de Chile. Asesor metodológico en los proyectos Fondecyt regulares 1131134, 1161353, 1220740 y 1231766. Actualmente se desempeña como el experto metodológico del IESED-Chile y para la Universidad de los Lagos.

Citas

Abello-romero, J. B., Sáez San Martin, W., & Mancilla, C. (2021). Evaluación del desempeño de las universidades: el aporte de los rankings mundiales. Hallazgos, 18(35), 55-75. https://doi.org/10.15332/2422409x.5792 DOI: https://doi.org/10.15332/2422409X.5792

Abramo, G., & D’Angelo, C. A. (2007). Measuring science: Irresistible temptations, easy shortcuts and dangerous consequences. Current Science, 93(6), 762–766. http://www.jstor.org/stable/24099115

Abramo, G., & D’Angelo, C. A. (2015). Evaluating university research: Same performance indicator, different rankings. Journal of Informetrics, 9(3), 514–525. https://doi.org/10.1016/j.joi.2015.04.002 DOI: https://doi.org/10.1016/j.joi.2015.04.002

Abramo, G., & D’Angelo, C. A. (2021). The different responses of universities to introduction of performance-based research funding. Research Evaluation, 30(4). https://doi.org/10.1093/reseval/rvab022 DOI: https://doi.org/10.1093/reseval/rvab022

Abramo, G., Cicero, T., & D’Angelo, C. A. (2013). Individual research performance: A proposal for comparing apples to oranges. Journal of Informetrics, 7(2), 528–539. https://doi.org/10.1016/j.joi.2013.01.013 DOI: https://doi.org/10.1016/j.joi.2013.01.013

Abramo, G., D’Angelo, A. C., & Murgia, G. (2017). The relationship among research productivity, research collaboration, and their determinants. Journal of Informetrics, 11(4), 1016–1030. https://doi.org/10.1016/j.joi.2017.09.007 DOI: https://doi.org/10.1016/j.joi.2017.09.007

Abramo, G., D’Angelo, C. A., & Di Costa, F. (2019). When research assessment exercises leave room for opportunistic behavior by the subjects under evaluation. Journal of Informetrics, 13(3), 830–840. https://doi.org/10.1016/j.joi.2019.07.006 DOI: https://doi.org/10.1016/j.joi.2019.07.006

Agasisti, T., Egorov, A., & Serebrennikov, P. (2023). Universities’ efficiency and the socioeconomic characteristics of their environment — Evidence from an empirical analysis. Socio-Economic Planning Sciences, 85. https://doi.org/10.1016/j.seps.2022.101445 DOI: https://doi.org/10.1016/j.seps.2022.101445

Alcaide-Aranda, L. I. del C. y Aguilar Alcaide, C. E. (2023). Liderazgo Escolar y sus Efectos Organizacionales en Procesos de Mejora Educativa. Revista de Comunicación de la SEECI, 56, 282–301. https://doi.org/10.15198/seeci.2023.56.e837 DOI: https://doi.org/10.15198/seeci.2023.56.e837

Altbach, P. G. (2008). Funciones complejas de las universidades en la era de la globalización. In La educación superior en el mundo: Educación superior, Nuevos retos y roles emergentes para el desarrollo humano y social (pp. 5-14).

América Economía (2017). Ranking Universidades de Chile: variables, ponderadores y validaciones. Documento de trabajo, Vol. 2. Santiago de Chile: América Economía Intelligence.

Ansmann, M., & Seyfried, M. (2022). Isomorphism and organizational performance: evidence from quality management in higher education. Quality Assurance in Education, 30(1), 135–149. https://doi.org/10.1108/QAE-07-2021-0114 DOI: https://doi.org/10.1108/QAE-07-2021-0114

Araya-Castillo, L., Burgos, M., González, P., Rivera, Y., Barrientos-Báez, A., Yáñez-Jara, V., Ganga-Contreras, F.A. y Sáez, W. (2023). Procrastination in University Students: A Proposal of a Theoretical Model. Behavioral Sciences,13(2), 128. https://doi.org/10.3390/bs13020128 DOI: https://doi.org/10.3390/bs13020128

ARWU- Academic Ranking of World Universities (2017). ShanghaiRanking's Academic Ranking of World Universities Methodology 2017. Disponible en: https://www.shanghairanking.com/methodology/arwu/2017 DOI: https://doi.org/10.1201/9781315155890-6

Ascanio Rengifo, R. (2022). Profesionales universitarios venezolanos que han emigrado y la pérdida del capital intelectual para el país. Revista de Ciencias de la Comunicación e Información, 27, 1-14. https://doi.org/10.35742/rcci.2022.27.e133 DOI: https://doi.org/10.35742/rcci.2022.27.e133

Barquero Cabrero, J. D., Caldevilla Domínguez, D., Barrientos Báez, A. & Gonzálvez Vallés, J. E. (2022). Social networks as a vehicle for happiness management in university governance. Corporate Governance, 22(3), 521-535. https://doi.org/10.1108/CG-05-2021-0182 DOI: https://doi.org/10.1108/CG-05-2021-0182

Barrientos-Báez, A., Caldevilla-Domínguez, D. y Gallego-Jiménez, M. G. (2020). Innovación universitaria en ecologías de aprendizaje. Enseñanza inclusiva en la educación superior: grado en turismo. Octaedro.

Bensalem, E. (2022). El impacto del disfrute y la ansiedad en la voluntad de comunicarse de los estudiantes del idioma inglés. Vivat Academia, Revista de Comunicación, 155, 91-111. https://doi.org/10.15178/va.2022.155.e1310 DOI: https://doi.org/10.15178/va.2022.155.e1310

Bornmann, L., Gralka, S., Anegón, F. D. M., & Wohlrabe, K. (2023). Efficiency of universities and research-focused institutions worldwide: The introduction of a new input indicator reflecting institutional staff numbers. Journal of Informetrics, 17(2). https://doi.org/10.1016/j.joi.2023.101400 DOI: https://doi.org/10.1016/j.joi.2023.101400

Brito, A. C. M., Silva, F. N., & Amancio, D. R. (2023). Analyzing the influence of prolific collaborations on authors productivity and visibility. Scientometrics, 128(4). https://doi.org/10.1007/s11192-023-04669-7 DOI: https://doi.org/10.1007/s11192-023-04669-7

Brunner JJ. y Ganga-Contreras F. (2016). Dinámicas de transformación en la Educación Superior latinoamericana: Desafíos para la gobernanza. Revista Opción. Año 32. N° 80.

Carvalho, T., & Videira, P. (2019). Losing autonomy? Restructuring higher education institutions governance and relations between teaching and non-teaching staff. Studies in Higher Education, 44(4). https://doi.org/10.1080/03075079.2017.1401059 DOI: https://doi.org/10.1080/03075079.2017.1401059

Chirikov, I. (2022). Does conflict of interest distort global university rankings? Higher Education. https://doi.org/10.1007/s10734-022-00942-5 DOI: https://doi.org/10.1007/s10734-022-00942-5

Cueva Estrada, J. M., Sumba Nacipucha, N., Meleán Romero, R., Artigas Morales, W., Cueva Ortiz, N. y Plaza Quimis, M. (2023a). Gestión del contenido en redes sociales, por revistas científicas indexadas en SciELO España. Revista de Comunicación de la SEECI, 56, 194–213. https://doi.org/10.15198/seeci.2023.56.e834 DOI: https://doi.org/10.15198/seeci.2023.56.e834

Cueva Estrada, J., Sumba Nacipucha, N., Paredes Floril, P., Sanchez-Bayon, A. y Carbo Guerrero, K. (2023b). Correlación entre Facebook y Google Scholar en el impacto de revistas científicas. Revista Latina de Comunicación Social, 81, 314–331. https://doi.org/10.4185/RLCS-2023-1897 DOI: https://doi.org/10.4185/RLCS-2023-1897

CWTS Leiden (2017). Information about the CWTS Leiden Ranking. Disponible en: https://www.leidenranking.com/information/general

De Albeniz, I. M. y Galarraga. A. (2022). Dilemas paradigmáticos y procesos de innovación en la cultura gastronómica del País Vasco. European Public & Social Innovation Review, 7(2), 84-98. https://pub.sinnergiak.org/esir/article/view/203 DOI: https://doi.org/10.31637/epsir.22-2.7

De Philippis, M. (2021). Multi-Task Agents and Incentives: The Case of Teaching and Research for University Professors. Economic Journal, 131(636). https://doi.org/10.1093/ej/ueaa119 DOI: https://doi.org/10.1093/ej/ueaa119

De Vicente Domínguez, A. M., Cea Esteruela, N. y Carballeda Camacho, M. R. (2022). La guía de expertos en las universidades privadas españolas: análisis de su presencia y gestión para la tranferencia del conocimiento científico. Revista de Ciencias de la Comunicación E Información, 27, 77-91. https://doi.org/10.35742/rcci.2022.27.e247 DOI: https://doi.org/10.35742/rcci.2022.27.e247

De-Moya-Anegón, F; Herrán-Páez, E; Bustos-González, A; Corera-Álvarez, El; Tibaná-Herrera, G (2017). Ranking Iberoamericano de instituciones de educación superior. SIR IBER 2017. Barcelona, España: Ediciones Profesionales de la Información SL. ISBN: 978 84 697 6288 2 http://doi.org/10.3145/sir-iber-2017 DOI: https://doi.org/10.3145/sir-iber-2017

Dobbins, M., Knill, C., & Vögtle, E. (2011). An analytical framework for the cross-country comparison of higher education governance. Higher Education, 62(5), 665–683. DOI: https://doi.org/10.1007/s10734-011-9412-4

Donina, D., & Paleari, S. (2019). New public management: global reform script or conceptual stretching? Analysis of university governance structures in the Napoleonic administrative tradition. Higher Education, 78(2). https://doi.org/10.1007/s10734-018-0338-y DOI: https://doi.org/10.1007/s10734-018-0338-y

Drucker, J., & Goldstein, H. (2007). Assessing the regional economic development impacts of universities: A review of current approaches. International Regional Science Review, 30(1), 20–46. https://doi.org/10.1177/0160017606296731 DOI: https://doi.org/10.1177/0160017606296731

Easley, J., Strawderman, L., Babski-Reeves, K., Bullington, S., & Smith, B. (2021). Perceived quality factors in higher education. Quality in Higher Education. https://doi.org/10.1080/13538322.2021.1909210 DOI: https://doi.org/10.1080/13538322.2021.1909210

Espeland, W. N., & Sauder, M. (2007). Rankings and reactivity: How public measures recreate social worlds. American Journal of Sociology, 113(1), 1–40. https://doi.org/10.1086/517897 DOI: https://doi.org/10.1086/517897

Etzkowitz, H. (2016). The Entrepreneurial University: Vision and Metrics. Industry and Higher Education, 30(2), 83–97. https://doi.org/10.5367/ihe.2016.0303 DOI: https://doi.org/10.5367/ihe.2016.0303

Flores-Orozco, J., Villaseñor-Becerra, J., & Moreno-Arellano, C. (2015). Perspectivas actuales sobre los rankings mundiales de universidades. Revista de la educación Superior, XLIV(175), 41-67. https://doi.org/10.1016/j.resu.2015.09.001 DOI: https://doi.org/10.1016/j.resu.2015.09.001

Gadd, E., Holmes, R., & Shearer, J. (2021). Developing a method for evaluating global university rankings. Scholarly Assessment Reports, 3(1). https://doi.org/10.29024/sar.31 DOI: https://doi.org/10.29024/sar.31

Ganga-Contreras F., Quiroz, J. y P. Fossatti (2017). Isomorfismo Organizacional (IO): Breves aproximaciones teóricas y algunas aplicaciones a la Educación Superior. Revista Espacios. Vol. 38. N° 20. pp. 31-43.

Ganga-Contreras, F., Sáez San Martín, W., Rodríguez-Ponce, E., Calderón, A.-I., & Wandercil, M. (2018). Universidades Públicas de Chile y su Desempeño en los Rankings Académicos Nacionales. Fronteiras: Journal of Social, Technological and Environmental Science, 7(3), 316-341. https://doi.org/https://doi.org/10.21664/2238-8869.2018v7i3.p316-341 DOI: https://doi.org/10.21664/2238-8869.2018v7i3.p316-341

Ganga-Contreras, F., Sáez-San Martin, S., Viancos, P., & Abello, J (2023). Rankings universitarios, ni ángeles ni demonios: críticas y usos por parte de grupos de interés. Journal of the Academy, (9), 158-183. https://doi.org/10.47058/joa9.10 DOI: https://doi.org/10.47058/joa9.10

Ganga-Contreras, F., Sáez-San Martín, W y Viancos, P (2019). Rankings de universidades como herramientas de evaluación institucional: un análisis a las metodologías utilizadas por tres instrumentos internacionales. Revista Inclusiones Vol. 6 N°4. pp. 367-382.

Ganga-Contreras, F., Suárez-Amaya, W., Valderrama-Hidalgo, C. y Salazar-Botello, C. (2022). Rankings universitarios y su influencia en el desempeño: Comparando perspectivas expertas de Chile y Venezuela. Retos Revista de Ciencias de la Administración y Economía, 12(24), pp. 200-210. https://doi.org/10.17163/ret.n24.2022.01 DOI: https://doi.org/10.17163/ret.n24.2022.01

Grupo de Estudios Avanzados Universitas (2017). Ranking general de calidad de la docencia de pregrado 2017. Disponible en: http://infografias.elmercurio.com/ESPECIALuniversidades2017/pdf1/Ranking_Docencia.pdf

Guba, K., Zheleznov, A., & Chechik, E. (2023). Evaluating grant proposals: Lessons from using metrics as screening device. Journal of Data and Information Science, 8(2). https://doi.org/10.2478/jdis-2023-0010 DOI: https://doi.org/10.2478/jdis-2023-0010

Guerra Guerra, A., & Flores Polán, M. G. (2023). Fomento de la Innovación Social: La España vaciada. European Public & Social Innovation Review, 8(1), 73-94. https://pub.sinnergiak.org/esir/article/view/193 DOI: https://doi.org/10.31637/epsir-2023-193

Hazelkorn, E. (2011). Rankings and the reshaping of higher education: The battle for world-class excellence. In Rankings and the Reshaping of Higher Education: The Battle for World-Class Excellence. https://doi.org/10.1057/9780230306394 DOI: https://doi.org/10.1057/9780230306394

Lee, J. J., Vance, H., Stensaker, B., & Ghosh, S. (2020). Global rankings at a local cost? The strategic pursuit of status and the third mission. Comparative Education, 56(2), 236–256. https://doi.org/10.1080/03050068.2020.1741195 DOI: https://doi.org/10.1080/03050068.2020.1741195

Lee, S., & Bozeman, B. (2005). The impact of research collaboration on scientific productivity. In Social Studies of Science (Vol. 35, Issue 5, pp. 673–702). https://doi.org/10.1177/0306312705052359 DOI: https://doi.org/10.1177/0306312705052359

Luque-Martínez, T., del Barrio-García, S., Doña-Toledo, L., & Faraoni, N. (2023). Value generation and economic impact of the University of Granada. Studies in Higher Education, 48(3), 369–382. https://doi.org/10.1080/03075079.2022.2138848 DOI: https://doi.org/10.1080/03075079.2022.2138848

Lynch, K. (2015). Control by numbers: new managerialism and ranking in higher education. Critical Studies in Education, 56(2), 190–207. https://doi.org/10.1080/17508487.2014.949811 DOI: https://doi.org/10.1080/17508487.2014.949811

Matarín Rodríguez-Peral, E., Gómez Franco, T. y García Manso, A. (2022). Aplicación del Proceso Analítico Jerárquico en la comunicación digital de los organismos públicos durante la pandemia de la COVID-19. Revista Latina de Comunicación Social, 80, 89-117. https://doi.org/10.4185/RLCS-2022-1532 DOI: https://doi.org/10.4185/RLCS-2022-1532

Mohammed, A. M. S., Ukai, T., & Hall, M. W. (2022). University campuses’ role in accelerating the natural urban transformation process. Bulletin of Geography. Socio-Economic Series, 58, 75–96. https://doi.org/10.12775/bgss-2022-0035 DOI: https://doi.org/10.12775/bgss-2022-0035

NTU Ranking (2017). Indicators Perfomance Ranking of Scientific Papers for World Universities. Disponible en: http://nturanking.csti.tw/methodoloyg/indicators

Pereira, R., & Franco, M. (2023). University-Firm Cooperation and Regional Development: Proposal of a Model of Analysis. Journal of the Knowledge Economy, 14(2), 676–690. https://doi.org/10.1007/s13132-022-00947-6 DOI: https://doi.org/10.1007/s13132-022-00947-6

Print, M., & Hattie, J. (1997). Measuring quality in universities: An approach to weighting research productivity. Higher Education, 33(4), 453–469. https://doi.org/10.1023/A:1002956407943 DOI: https://doi.org/10.1023/A:1002956407943

Quacquarelli Symonds (2017). QS World University Rankings 2018 Supplement. Disponible en: https://www.topuniversities.com/student-info/qs-guides/qs-world-university-rankings-2018-supplement

Qué Pasa (2017). Ranking de Universiaddes 2017, Qué Pasa- La Tarcera. Disponible en: http://especiales.latercera.com/2017/universidades/article.html?id=0

Reyes, C. (2016). Medición de la calidad universitaria en Chile: La influencia de los rankings. Calidad en la Educación(44), 158-196. doi:10.4067/S0718-45652016000100007 DOI: https://doi.org/10.4067/S0718-45652016000100007

Sáez, W., Ganga-Contreras, F., Calderon, A. I., & Wandercil, M. (2023). ¿Universidades de Clase Mundial? Las universidades chilenas en los rankings académicos internacionales. Revista Meta: Avaliação, 15(46), 28. https://doi.org/10.22347/2175-2753v15i46.3892 DOI: https://doi.org/10.22347/2175-2753v15i46.3892

Sánchez-Barrioluengo, M., & Benneworth, P. (2019). Is the entrepreneurial university also regionally engaged? Analysing the influence of university’s structural configuration on third mission performance. Technological Forecasting and Social Change, 141, 206–218. https://doi.org/10.1016/j.techfore.2018.10.017 DOI: https://doi.org/10.1016/j.techfore.2018.10.017

Santos, J. M. R. C. A., Varela, C., & Martínez-Galán, E. (2022). A Framework for the Management of Research and Innovation Projects in Academic Settings. Journal of Research Administration, 53(2), 60–84.

Scimago (2017). Ranking Methodology. Disponible en: https://www.scimagoir.com/methodology.php

Scott, J. C. (2006). The mission of the university: Medieval to postmodern transformations. Journal of Higher Education, 77(1). https://doi.org/10.1080/00221546.2006.11778917 DOI: https://doi.org/10.1353/jhe.2006.0007

Sigl, L., Felt, U., & Fochler, M. (2020). “I am Primarily Paid for Publishing…”: The Narrative Framing of Societal Responsibilities in Academic Life Science Research. Science and Engineering Ethics, 26(3), 1569–1593. https://doi.org/10.1007/s11948-020-00191-8 DOI: https://doi.org/10.1007/s11948-020-00191-8

Song, J., & Yang, Z. (2023). Striving Transition for University Academics: The Academic Role Identity of Young Postdocs at Universities in China. SAGE Open, 13(1). https://doi.org/10.1177/21582440231153054 DOI: https://doi.org/10.1177/21582440231153054

Suárez-Amaya, Wendolin, & Ganga-Contreras, Francisco, & Barrios Fuentes, Eliana, & Pereira Burgos, Morela, & Villegas-Villegas, Francisco (2021). PERSPECTIVA DE LOS ACADÉMICOS VENEZOLANOS RESPECTO DE LOS RANKINGS UNIVERSITARIOS. Interciencia, 46(2),72-78.[fecha de Consulta 1 de Septiembre de 2021]. ISSN: 0378-1844. Disponible en: https://www.redalyc.org/articulo.oa?id=33966129004

Taşbaşı, K. (2023). Objecıón a la investigación generacional en los estudios de comunicacıón: una crítica teórica. Vivat Academia, Revista de Comunicación, 157, 1–24. https://doi.org/10.15178/va.2024.157.e1504 DOI: https://doi.org/10.15178/va.2024.157.e1504

Thompson-Whitside, S. (2016). Zen and the art of university rankings in art and design. She Ji= The Journal of Design, Economics, and Innovation, 2(3), 243-255. https://doi.org/:10.1016/j.sheji.2017.01.001 DOI: https://doi.org/10.1016/j.sheji.2017.01.001

Times Higher Education (2017). World University Rankings 2018 Methodology. Disponible en: https://www.timeshighereducation.com/world-university-rankings/methodology-world-university-rankings-2018

Troncoso, E.; Ganga-Contreras, F.; Briceño, M. (2022). Incentive Policies for Scientific Publications in the State Universities of Chile. Publications, 10(20). https://doi.org/10.3390/publications 10020020 DOI: https://doi.org/10.3390/publications10020020

U.S. News (2018). How U.S. News Calculated the Best Global Universities Rankings. Disponible en: https://www.usnews.com/education/best-global-universities/articles/methodology

U-Multirank (2017). U-Multirank's approach to university rankings. Disponible en: https://www.umultirank.org/about/methodology/our-approach/

URAP Research Laboratory (2017). Methodology: How we do. Disponible en: https://urapcenter.org/Methodology

Zagorac, I. (2017). The idea of the university and the role of philosophy. In Diacovensia (Vol. 25, Issue 4, pp. 531–547). https://doi.org/10.31823/d.25.4.2 DOI: https://doi.org/10.31823/d.25.4.2

Descargas

Publicado

2024-11-15

Cómo citar

Ganga Contreras, F., Abello Romero, J. B., Viancos-González, P., Saéz-San Martin, W., & Andrade Ríos, L. (2024). Dimensiones de la evaluación de universidades según escalas de valoración: Percepción de los expertos latinoamericanos. European Public & Social Innovation Review, 9, 1–22. https://doi.org/10.31637/epsir-2024-1679

Número

Sección

INNOVACIÓN EN PERFILES DE FORMACIÓN PARA LAS NECESIDADES DISCENTES