Ecossocioeconomic Impact Evaluation Of Brazilian Graduate
DOI:
https://doi.org/10.32991/2237-2717.2024v14i3.p420-460Keywords:
multidimensional impact indicators, graduate, sustainabilityAbstract
In recent decades, graduate programs have been seeking to better qualify their assessment through multidimensional indicators, capable of measuring socioeconomic and environmental impacts in a systemic way. Environmental history reveals links with regional history, focusing on social and natural processes and their interdisciplinary relationship and connection with Environmental Sciences. The Coordination for the Improvement of Higher Education Personnel is implementing policies to improve the efficiency, effectiveness and effectiveness of Graduate and ensure that processes, results and impacts of teaching, research and extension activities are qualified. In this sense, there are significant studies that address the evolution of the Evaluation System, using indicator systems. The objective of this article is to present a proposal for indicators of eco-socioeconomic impacts for the evaluation of Graduate. Methodologically, it is descriptive research with a systematic review of the literature in the time frame from 2013 to 2023, in the CAPES Periodical databases of graduate indicators used worldwide, with special attention to indicators such as the U-Multirank, UMR, recommended by the European Commission, Green Office Movement - University Sustainability Assessment Framework (UniSAF), EIS-RC-PMU proposed by Pino Sera et al., Armas Evaluation Methodology and Valle, among others. This article demonstrates the complexity involved in analyzing and structuring the diversity of proposed indicators and concludes that the use of indicators presupposes implications and value judgments, which are difficult to validate, considering the local reality and the regional scope, which allows evaluation by fields of knowledge, and that generate significant impacts on society: communities (territorialized individuals), State and Institutions.
References
Alcântara, L.; Sampaio, C. A. C. Bem viver e ecossocioeconomias. Cuiabá: EdUFMT. 2019.p. 96.
Alcântara, L.C. S.; Sampaio, C. A. C. “Indicadores de Bem Viver: pela valorização de identidades culturais”. Revista Meio Ambiente e Desenvolvimento. Vol. 53, p. 78-101, jan./jun. 2020. doi: 10.5380/dma. v53i0.62963.
Associação Brasileira de Normas Técnicas Prática Recomendada: ABNT PR 2030: Ambiental, social e governança (ESG) — Conceitos, diretrizes e modelo de avaliação e direcionamento para organizações / Associação Brasileira de Normas Técnicas. – Rio de Janeiro: ABNT, 2022. 135 p.
Báo, S. N. Diretoria de Avaliação – DAV. Sistema Nacional de Pós-graduação: atualidades e perspectivas. Brasília: fevereiro de 2020. Disponível em: http://www.prpg.ufpb.br/prpg/contents/downloads/Apresentao_Sonia_Bao_2020.pdf. Acesso em: 02 maio 2023.
Brasil, Ministério da Educação. Coordenação de Aperfeiçoamento de Pessoal de Nível Superior (CAPES). Relatório de Avaliação Quadrienal - Ciências Ambientais. Brasília: CAPES, 2017. Disponível em: http://www.capes.gov.br/images/stories/download/avaliacao/relatorios-finais-quadrienal-2017/20122017-CIENCIAS-AMBIENTAIS-quadrienal.pdf. Acesso em: 26 abr. 2023.
Brasil, Ministério da Educação. Coordenação de Aperfeiçoamento de Pessoal de Nível Superior (CAPES). Educação doutoral: reformas e tendências: relatório técnico da Diretoria de Avaliação. Brasília: CAPES, 2018.
Brasil. Coordenação de Aperfeiçoamento de Pessoal de Nível Superior (CAPES). Proposta de avaliação de revisão da ficha para a avaliação dos Programas de Pós-Graduação. 2019. Disponível em: https://dadosabertos.capes.gov.br/. Acesso em 21 abr.2023.
Brasil, Ministério da Educação. Coordenação de Aperfeiçoamento de Pessoal de Nível Superior (CAPES). Avaliação multidimensional de programas de pós-graduação: relatório técnico da Diretoria de Avaliação. Brasília: CAPES, 2019a.
Brasil, Ministério da Educação. Coordenação de Aperfeiçoamento de Pessoal de Nível Superior (CAPES). GT impacto e relevância econômica e social: relatório final de atividades. Brasília: CAPES, 2019b.
Brasil, Ministério da Educação. Coordenação de Aperfeiçoamento de Pessoal de Nível Superior (CAPES). GT produção técnica: relatório final de atividades. Brasília: CAPES, 2019c.
Brasil, Ministério da Educação. Coordenação de Aperfeiçoamento de Pessoal de Nível Superior (CAPES). Documento de área - Ciências Ambientais. Brasília: CAPES, 2019d. Disponível em: http://www.gov.br/capes/pt-br/centrais-de-conteudo/C_amb.pdf. Acesso em: 28.mar.2022.
Brasil, Ministério da Educação. Coordenação de Aperfeiçoamento de Pessoal de Nível Superior. GEOCAPES - Sistema de Informações Georreferenciadas. Distribuição de programas de pós-graduação no Brasil. Brasília: CAPES, 2019e. Disponível: GEOCAPES. Acesso em: 08 maio 2023.
Brasil, Ministério da Educação. Coordenação de Aperfeiçoamento de Pessoal de Nível Superior (CAPES). Relatório Técnico DAV. Avaliação Multidimensional de Programas de Pós-graduação. Brasília: 2020. Disponível em: https://www.gov.br/capes/pt-br/centrais-de-conteudo/23072020-dav-multi-pdf. Acesso em: 01 maio 2023.
Brasil, Ministério da Educação. Coordenação de Aperfeiçoamento de Pessoal de Nível Superior (CAPES). Cursos avaliados e reconhecidos por região. Brasília: CAPES, 2021. Disponível: Plataforma Sucupira (capes.gov.br). Acesso em: 08 de abril 2023.
Brasil. Coordenação de Aperfeiçoamento de Pessoal de Nível Superior (CAPES). Resultado da Avaliação Quadrienal 2017-2020. 2022. Disponível em:
https://www.gov.br/capes/pt-br/acesso-a-informacao/acoes-e-programas/avaliacao/avaliacao-quadrienal/resultado-da-avaliacao-quadrienal-2017-2020. Acesso em 18 abril 2023.
Cabrera, J. Evaluación de la capacitación y de su impacto en el desempeño individual y organizacional. V Congreso Internacional Virtual de Educación. 2005. Acceso: 10/07/2021. Disponible en: http://sedici.unlp.edu.ar/bitstream/handle/10915/24726/Documento_completo.pdf?sequence =1. Acesso em: 01 de jun. 2023.
Carrera, M.A.M.; Mesa, N.C.; Padilla, Y. C. “Metodología para evaluar el impacto de la educación de posgrado”. Transformación, ISSN: 2077-2955, RNPS: enero-abril 2022, 18 (1), 53-69.
Ceretta, L. O Impacto econômico, social e cultural: análise dos critérios de avaliação da CAPES e o Mestrado Profissional em Preservação do Patrimônio Cultural do IPHAN (PEP-IPHAN). Trabalho de conclusão de curso (Graduação) – Universidade Federal do Rio Grande do Sul, Faculdade de Biblioteconomia e Comunicação, Curso de Biblioteconomia, Porto Alegre, BR-RS, 2022. 91 p.
Cruz-Baranda, S.S.; García-Quiala, M.B. Ciencia en su PC, N. 3, julio-septiembre, 2012. Disponível em: https://www.redalyc.org/pdf/1813/181324071002.pdf. Acesso em: 23 mar. 2023.
De Armas, N.; Valle, A. “Resultados científicos en la investigación educativa”. La Habana: Pueblo y Educación, 2011.
Dias Sobrinho, J. “Avaliação ética e política em função da educação como direito público ou como mercadoria?” Educação & Sociedade, v. 25, n. 88, p. 703-725, 2004. Disponível em: http://www.scielo.br/pdf/es/v25n88/a04v2588.pdf. Acesso em: 27 maio 2023.
Díaz, P.; Leyva, E.; Borroto, E.; Vicedo, A. “Impacto de la maestría en Educación Médica Superior en el desarrollo docente de sus egresados”. Educación Médica Superior, 2014, 8(3), 531-546. Acceso: 13/03/2020. Disponible en: http://www.ems.sld.cu/index.php/ems/article/view/511. Acesso em 23 de abr. 2023.
Donovan, C. The Australian Research Quality Framework: A live experiment in capturing the social, economic, environmental, and cultural returns of publicly funded research. In: CORYN, C. L. S.; SCRIVEN, M. (Orgs.). “Reforming the Evaluation of Research”. New Directions for Evaluation, v. 118, p. 47-60, 2008.
Dutra e Silva, D; Fernandes, V. “Historia y racionalidade ambiental em el lado sombrío de la modernidad”. En: Historia ambiental de América Latina: enfoques, procedimientos y cotidianidades. Pedro S. Urquijo, Adi E. Lazos, Karine Lefebvre, coordinadores. Primera edición. Morelia, Michoacán de Ocampo: Universidad Nacional Autónoma de México, Centro de Investigaciones en Geografía Ambiental, 2022.
European Commission. European Research Area. Assessing Europe’s University-Based Research: Expert Group on Assessment of University-Based Research. Bruxelas: European Commission, 2010. Disponível em: https://ec.europa.eu/research/science-society/document_library/pdf_06/assessing-europe-university-based-research_en.pdf. Acesso em: 28 maio 2023.
Fonseca, I. F.; Bursztyn, M. “Mercadores de moralidade: a retórica ambientalista e a prática do desenvolvimento sustentável”. Ambiente & Sociedade, v. 10, n. 2, p. 169-186, 2007. DOI: 10.1590/S1414-753X2007000200013.
Furtado, A. T.; Bin, A.; Bonacelli, M. B. M.; Paulino, S. R.; Miglino, M. A.; Castro, P. F. D. “Evaluation of the results and impacts of a social-oriented technology program in Brazil: the case of PROSAB” (a sanitation research program). Research Evaluation, v. 18, n. 4, p. 289-300, 2009.
Goglio, V. “One Size Fits All? A different perspective on university rankings”, Journal of Higher Education Policy and Management. 2016. DOI: 10.180/1360080X.2016.1150553.
Gomes Jr., J. C. Corbari, S. D.; Kniess, C. T.; Silva, G. M. N; Piontkwicz, S. C.; Melo, M. S.; Carbone, A. S. et al., “Proposed mapping and evaluation model of Sustainable Development Goals in graduate programs in environmental sciences in Brazil”. International Journal of Sustainability in Higher Education, v. 24, n. 9, p. 1 - 22, 2023. Doi: 10.1108/IJSHE-07-2022-0230
Green Office Movement. About the Green Office Movement. 2021. Disponível em: https://www.greenofficemovement.org/about/. Acesso em: 03 maio 2023.
Higher Education Funding Council for England (HEFCE). Annual report and accounts, 2014-15. Bristol: Higher Education Funding Council for England. 2015. Disponível em: ttps://assets.publishing.service.gov.uk/government/uploads/system/uploads/attachment_data/file/435744/49848_HC_5_ACCESSIBLE_v2.pdf. Acesso em: 15 de abr. 2023.
Kniess, C. T., Sampaio, C. A. C., Philippi Júnior, A., Plonski, G. A., Goldemberg, J., Pádua, J. A., Franco, R. M., Ricupero, R., Bressan Júnior, A., Sobral, M. do C. M., Maglio, I. C., Nobre, C., Andreoli, C. V., Fernandes, V., Mattei, J. F., Ribeiro, W. C., Buckeridge, M. S., Dutra e Silva, S. “50 anos de Estocolmo’72 e 30 Anos da Rio’92: Reflexões sobre o Brasil Contemporâneo e os Desafios para um Futuro Sustentável”. Historia Ambiental Latinoamericana Y Caribeña (HALAC) Revista De La Solcha, 12(3), 406–437. https://doi.org/10.32991/2237-2717.2022v12i3.p406-437
Lara, L. M.; Navales, M. Á.; Bravo, G. “Evaluación del impacto de un programa de maestría para un cambio sostenible”. Revista Conrado, 14(63), 101-108, 2018.
Laville, J. L. A new European socioeconomic perspective. Review of Social Economy, Oxfordshire, v. 61, n. 3, p. 389-405, 2003.
Leff, E. “Construindo a história ambiental da América Latina”. Esboços – Revista do Programa de Pós-graduação em História da UFSC. v. 12, n. 13: 2005.
Max-Neef, M.; Elizalde A.; Hopenhayn, M. Human scale development: conception, application and further reflections. New York: The Apex Print, 1991.
Morales, A. G. M. “A formação dos profissionais educadores ambientais e a universidade: trajetórias dos cursos de especialização no contexto brasileiro”. Educ. Rev. (34): 2009. https://doi.org/10.1590/S0104-40602009000200011.
Nações Unidas. Objetivos do desenvolvimento sustentável. 2021. Disponível em: https://brasil.un.org/pt-br. Acesso em 16 nov 2023.
Núñez J. J. Universidad, conocimiento y desarrollo: nuevas encrucijadas: una lectura desde ciencia, tecnología y sociedad. UH. La Habana, Cuba: UH Editorial, 2019, 132 p.
Oliveira, E.T.; Guedes, O.S.” U-Multirank à brasileira: Notas críticas acerca da avaliação multidimensional da CAPES”. Revista Humanidades e Inovação. Palmas, 2022. V. 9, n.03.
Organização das Nações Unidas (ONU), Brasil. Objetivos de Desenvolvimento Sustentável. 2015. Disponível em: https://brasil.un.org/pt-br/sdgs. Acesso em: 20 maio 2023.
Ordorika, I; Lloyd, M. A Decade of international university Rankings: a critical perspective from Latin America. Capítulo 12. (p. 209-231). In: Rankings and accountability in higher education uses and misuses. P.T.M. Marope, P.J. Wells and E. Hazelkorn (eds), Unesco, França, 2013.
Pagell, R. A. Ruth’s Rankings 12: UMultirank: Is it for “U”? ACCESS - Asia’s Newspaper on Electronic Information Products & Services. 11 de junho de 2015. Disponível em:< http://twixar.me/ jd0n>. Acesso em: 21 maio 2023.
Penfield, T.; Baker, M. J.; Scoble, R.; Wykes, M.C. “Assessment, evaluations, and definitions of research impact: A review”. Research Evaluation, v. 23, n. 1, p. 21-32, 2014.
Pino Sera, Y.; Toro Prada, J. J.; Penã, R.M.; Hernández, M. E. N.; García, I. J. C. Metodología para la evaluación del impacto social de los resultados científicos de las maestrías. Universidad y Sociedad. Cienfuegos, v. 14, n. 3, p. 30-40, jun. 2022. Disponible em:<http://scielo.sld.cu/scielo.php?script=sci_arttext&pid=S2218-36202022000300030&lng=es&nrm=iso>. Acesso em: 24 mar. 2023.
Programa das Nações Unidas Para o Desenvolvimento. PNUD. Informe sobre Desarrollo Humano 2019. http://www.hdr.undp.org/sites/default/files/hdr_2019_es.pdf. Acesso em: 18 maio 2023.
Quiroga, R. M. Indicadores de sostenibilidad ambiental y desarrollo sostenible: estado del arte y perspectivas. División de Medio Ambiente y Asentamientos Humanos Santiago de Chile, septiembre de 2001.
Reale, E.; Avramov, D.; Canhial, K.; Donovan, C.; Flecha, R.; Holm, P.; Larkin, et al. “A review of literature on evaluating the scientific, social and political impact of social sciences and humanities research”. Research Evaluation, 2018, 27(4), 298–308.
Research Excellence Framework (REF). Department for Employment and Learning. Decisions on assessing research impact. Reino Unido: REF, 2014. Disponível em: http://www.ref.ac.uk/2014/media/ref/content/pub/decisionsonassessingresearchimpact/01_11.pdf. Acesso em 28 maio 2023.
Rodríguez, O. “Evaluación del impacto del posgrado de la carrera Licenciatura en Educación Primaria de la Universidad de Matanzas”. Revista Docencia Universitaria, 2017, 18(1), 105-129.
Román, M. “La Evaluación de impacto de la formación. Una aproximación desde los modelos clásicos y las experiencias de investigación”. Estudios del Desarrollo Social: Cuba y América Latina, 2017, 5 (3), 116-129.
Sachs, I. Desenvolvimento: includente, sustentável, sustentado. Rio de Janeiro. Ed. Garamond. 151p. 2004.
Sachs, I. Rumo à ecossocioeconomia: teoria e prática do desenvolvimento. Organização e Tradução de Paulo H. F. VIEIRA. São Paulo: Cortez, 2007.
Sampaio, C. A. C.; Alves, F. K. Ecossocioeconomias: um conceito em construção. In: Sampaio, C. A. C.; Grimm, I J.; Alcântara, L. C S.; Mantovaneli JR, O. Ecossocioeconomias: promovendo territórios sustentáveis. Blumenau: Edifurb, 2019.p.15-34.
Sampaio, C. A. C.; Kniees C. T.; Corbari, S.; Philippi Júnior, A.; Sobral, M. C. M. “Contribuição da pós-graduação brasileira em ciências ambientais na implementação da agenda 2030”. Revista NUPEM, v. 12, n. 27, p. 277-299, 2020.
Sampaio, C. A. C.; Grimm, I. J.; Alcântara, L, C. S; Mantovaneli Júnior, O. “Ecossocioeconomias: análise de experiências ao oeste do Estados Unidos da América”. Revista Brasileira de Gestão e Desenvolvimento Regional – G&DR. V. 16, N. 3, Taubaté, SP: set-dez 2020, p. 383-396.
Sampaio, C. A. C.; Philippi Jr., A; Sobral, M. C. M.; Romano, R. G. Contribuição da Pós-Graduação em Ciências Ambientais para a sustentabilidade. In: Sampaio, C. A. C.; Philippi JR., A. Impacto das Ciências ambientais na agenda 2030 da ONU. São Paulo: IEA/USP, 2021, v. 1, p. 37 -59. Disponível: http://www.iea.usp.br/publicacoes/ebooks
Sen, A. “Social exclusion: concept, application, and scrutiny”. Social Development Papers, Office of Environment and Social Development Asian Development Bank, n. 1, 2000.
Smanio, G. P.; Ramos, T. “Perspectivas do novo sistema de avaliação da pós-graduação e os desafios da área do Direito”. Revista da Faculdade de Direito, Universidade de São Paulo, [S. l.], v. 116, n. 1, p. 409-418, 2021. DOI: 10.11606/issn.2318-8235.v116p409-418.
Spaapen, J.; Drooge, L. “Introducing ‘productive interactions’ in social impact assessment”. Research Evaluation, v. 20, n. 3, 2011, p. 211-218.
Spagnolo, F.; Souza, V. C. “O que mudar na avaliação da CAPES?” Revista Brasileira de Pós-Graduação, v. 1, n. 2, p. 8-34, 2004.
Springett, D.; Redclift, M. Sustainable Development: history and evolution of the concept. In: Springett, D.; Redclift, M. (Ed.). Routledge International Handbook of Sustainable Development. New York: Routledge, 2015.
Tejeda, R. “La evaluación del impacto formativo en contextos educativos universitarios.” Didasc@lia: Didáctica y Educación. 2011. v. 2(4), 45-58. Acceso: 18/02/2020. Disponible en: http://revistas.ult.edu.cu/index.php/didascalia/article/view/63. Accesso em 01 Jun. 2023.
Times Higher Education. Impact Ranking 2020. The World University Ranking. 2020. Disponível em: https://bit.ly/3pvdftm. Acesso em: 06 maio 2023.
U-Multirank Project. Catalogue of Mapping Indicators. Disponível em:< http://twixar.me/5d0n>. Acesso em fevereiro de 2019. Access inem:< http://twixar.me/6mrK>. Access: 25 abr. 2023.
Downloads
Published
How to Cite
Issue
Section
License
Copyright (c) 2024 Liliane Cristine Schlemer Alcantara, Sampaio
This work is licensed under a Creative Commons Attribution-NonCommercial 4.0 International License.
This journal offers immediate free access to its content, following the principle that providing free scientific knowledge to the public provides greater global democratization of knowledge.
As of the publication in the magazine the authors have copyright and publication rights of their articles without restrictions.
The HALAC Magazine follows the legal precepts of the Creative Commons - Attribution-Non-Commercial 4.0 International license. 
