Institutional evaluation of content and research projects in a CPI: A case study (2013-2022)

Authors

DOI:

https://doi.org/10.55965/setp.3.coed1.a3

Keywords:

academic productivity, automated content analysis, thematic analysis, national problems, research public centers

Abstract

Purpose. Intra and inter-institutional content were evaluated in a CPI case study through the transdisciplinary use of organizational up-down/bottom-up approaches and automated content analysis tools.

Methodology. A CPI case study established a system of intra (program and research projects) and inter (national issues) contents during 2013-2022. It was structured from an up-down/bottom-up perspective and evaluated using automated content analysis tools. Reliability and validity were established based on a system of heuristic rules and similarity analysis among groups of documents. Theoretical and practical Findings. As a theoretical contribution (Scientia), an inter and intra- institutional content model was developed based on up-down/bottom-up evaluation systems. In the practical contribution (Praxis), areas of opportunity were identified to improve academic alignment and orientation processes.

Transdisciplinary and sustainable innovation originality. An innovative and transdisciplinary theoretical-methodological tool was developed, integrating Mexican laws related to national issues, programs, and research projects from a CPI case study. These were structured and evaluated using up-down/bottom-up organizational perspectives and massive document analysis. This achievement resulted in an evaluation system that improves the integration and sustainability of current academic evaluation systems.

Conclusions and limitations. Content generation is an essential part of academic production in HEIs and CPIs, thus making its evaluation indispensable. Furthermore, combining content analysis and statistical methods is necessary as avenues for transdisciplinary innovation that foster fair and sustainable academic production and evaluation systems.

Downloads

Download data is not yet available.

Author Biographies

Miguel Ángel Martínez-Téllez, Researcher at the Centro de Investigación en Alimentación y Desarrollo, A.C. (CIAD-CONAHCYT), Hermosillo,Sonora, México

Researcher at the Centro de Investigación en Alimentación y Desarrollo, A.C. (CIAD-CONAHCYT) Hermosillo,Sonora, México

Alan Celaya-Lozano, Researcher at the Centro de Investigación en Alimentación y Desarrollo, A.C. (CIAD-CONAHCYT), Hermosillo,Sonora, México

Researcher at the Centro de Investigación en Alimentación y Desarrollo, A.C., Hermosillo,Sonora, México

References

Arriaga-Cárdenas, O.G., Lara-Magaña, P.D.C., y Pasciuta-Marco, P.D., 2022. Los Centros Públicos de Investigación, como eje central de la innovación y la educación en México. Scientia et PRAXIS 2 (4), 66–81.https://doi.org/10.55965/setp.2.coed.a3 DOI: https://doi.org/10.55965/setp.2.coed.a3

Benoit, K. (2020). Text as data: an overview. In L. Curini (Ed.), The SAGE Handbook of Research Methods in Political Science and International Relations (Vols. 1 & 2, pp. 26). SAGE Publications Ltd. https://doi.org/10.4135/9781526486387 DOI: https://doi.org/10.4135/9781526486387

Braun, V., y Clarke, V. (2012). Thematic analysis. In H. Cooper (Ed.), APA handbook of research methods in psychology: Research designs (Vol. 2, pp. 57–71). American Psychological Association. https://doi.org/10.1037/13620-004 DOI: https://doi.org/10.1037/13620-004

Buendía-Espinosa, A., García-Salord, S., Landesmann, M., Rodríguez-Gómez, R., Rondero, N., Rueda, M., y Vera, H. (2019). A debate la educación superior y la ciencia en México. Revista mexicana de investigación educativa, 24(80), 7-13. http://www.scielo.org.mx/scielo.php?script=sci_arttext&pid=S1405- 66662019000100007&lng=es&tlng=es

Celaya-Lozano, A., Luque-Agraz, D., García-Hernández, J., Amozurrutia De María y Campos, J. A., Preciado-Rodríguez, J. M., Laborín-Álvarez, J., y Cabanillas-López, R. E. (2017). Evaluación de la producción científica de sustentabilidad ambiental en un centro público de investigación

(cpi) del Conacyt (1982-2012). Revista de la Educación Superior, 46(182), 89-112.

https://doi.org/10.1016/j.resu.2017.04.002 DOI: https://doi.org/10.1016/j.resu.2017.04.002

Chicharro-Chamorro, A. (1993). Una introducción al concepto de tema en la teoría literaria actual.

En: Antiqva et nova Romania: Estudios lingüísticos y filológicos en honor de José Mondéjar en su sexagesimoquinto aniversario. Tomo II. Granada: Universidad de Granada, pp. 159- 173. http://hdl.handle.net/10481/49734

Centro de Investigación en Alimentación y Desarrollo. (CIAD, 2023, 6 de abril). Acerca del CIAD: ¿Quiénes somos? CIAD. https://www.ciad.mx/

Consejo Nacional de Ciencia y Tecnología. (CONACYT, 2017). Informe General del Estado de la Ciencia, la Tecnología y la Innovación México 2017. CONACYT. https://www.siicyt.gob.mx/index.php/transparencia/informes-conacyt/informe-general-del- estado-de-la-ciencia-tecnologia-e-innovacion/informe-general-2017

Consejo Nacional de Ciencia y Tecnología. (CONACYT, 2019). Informe General del Estado de la Ciencia, la Tecnología y la Innovación México 2019. Consultado el 6-May- https://www.siicyt.gob.mx/index.php/transparencia/informes-conacyt/informe-general-del- estado-de-la-ciencia-tecnologia-e-innovacion/informe-general-2019

Consejo Nacional de Humanidades, Ciencia y Tecnología. (2023, 6 de mayo). Conahcyt en México: Centros Públicos. Consejo Nacional de Humanidades, Ciencia y Tecnología. https://conahcyt.mx/

García-García, C., y Hervás-Torres, M. (2020). Los sistemas de evaluación de la Educación Superior en México y España. Un estudio comparativo. Revista de la educación superior, 49(194), 115-136. https://doi.org/10.36857/resu.2020.194.1127

Guo, L., Vargo, C. J., Pan, Z., Ding, W., y Ishwar, P. (2016). Big social data analytics in journalism and mass communication: Comparing dictionary-based text analysis and unsupervised topic modeling. Journalism & Mass Communication Quarterly, 93(2), 332–359. https://doi.org/10.1177/1077699016639231 DOI: https://doi.org/10.1177/1077699016639231

Gastelum-Acosta, C., Limon-Romero, J., Maciel-Monteon, M., y Baez-Lopez, Y. (2018). Seis Sigma en Instituciones de Educación Superior en México. Información tecnológica, 29(5), 91-100. https://doi.org/10.4067/s0718-07642018000500091 DOI: https://doi.org/10.4067/S0718-07642018000500091

International Business Machines Corporation. (IBM, 2023). Consulta realizada el 5 de mayo de 2023. Ver en https://www.ibm.com/docs/es/spss-statistics/29.0.0?topic=measures-distances- similarity-binary-data

Instituto Internacional de la UNESCO para la Educación Superior en América Latina y el Caribe. (2008). Tendencias de la Educación Superior en América Latina y el Caribe. Editado por Ana Lúcia Gazzola y Axel Didriksson. Caracas.

Lemaitre, M.J., y Karakhanyan, S. (2020). Quality Assurance in Higher Education, A Global Perspective. In: Teixeira, P.N., Shin, J.C. (eds) The International Encyclopedia of Higher Education Systems and Institutions. Springer, Dordrecht. https://doi.org/10.1007/978-94- 017-8905-9_263 DOI: https://doi.org/10.1007/978-94-017-8905-9_263

Márquez, T. M. (2016). "Words Matter: A Content Analysis Study of Public and Private Higher Education Mission Statements in the Middle States Region". Education Doctoral. Paper 286. https://fisherpub.sjf.edu/education_etd/286

Mejía-Trejo, J., y Aguilar-Navarro, C.O., 2022. El Modelo de Marco Lógico y la Teoría del Cambio: Bases para la Planeación Estratégica de la Innovación con Impacto Social en un Centro Público de Investigación de México. Scientia et PRAXIS 2, 1–34.

https://doi.org/10.55965/setp.2.coed.a1 DOI: https://doi.org/10.55965/setp.2.coed.a1

Mosquera, M. (2020). La agenda institucional de las relaciones internacionales chinas. Análisis del

documento oficial sobre la guerra comercial con Estados Unidos. Estudios de Asia y África,

(2), 325-356. https://doi.org/10.24201/eaa.v55i2.2495 DOI: https://doi.org/10.24201/eaa.v55i2.2495

Munévar-Munévar, D. I., y Villaseñor-García, M. L. (2008). Producción de conocimientos y

productividad académica. Revista de Educación y Desarrollo, 8, 61-67.

https://www.cucs.udg.mx/revistas/edu_desarrollo/anteriores/8/008_Munevar.pdf Organization for Economic Co-operation and Development. (2019). Higher Education in Mexico: Labour Market Relevance and Outcomes. Higher Education, OECD Publishing, Paris.

https://doi.org/10.1787/9789264309432-en DOI: https://doi.org/10.1787/9789264309432-en

Hase, V. (2023). Automated Content Analysis. En F. Oehmer-Pedrazzi et al. (Eds.), Standardized DOI: https://doi.org/10.1007/978-3-658-36179-2_3

Content Analysis in Communication Research (pp. 23–36). https://doi.org/10.1007/978-3- 658-36179-2_3

Published

2023-06-22

How to Cite

Martínez-Téllez, M. Ángel, & Celaya-Lozano, A. (2023). Institutional evaluation of content and research projects in a CPI: A case study (2013-2022). Scientia Et PRAXIS, 3(05), 51–77. https://doi.org/10.55965/setp.3.coed1.a3

Issue

Section

Scientific Articles. Special Edition