Competencies and experience in evaluation: an analysis of SINAES external evaluators

Autor: Castro, Luis Carlos da Silva
Přispěvatelé: Paixão, Roberto Brazileiro, Elliot, Ligia Gomes, Almeida, Denise Ribeiro de, Backes, Danieli Artuzi Pes
Jazyk: portugalština
Rok vydání: 2021
Předmět:
Zdroj: Repositório Institucional da UFBA
Universidade Federal da Bahia (UFBA)
instacron:UFBA
Popis: Submitted by Núcleo de Pós-Graduação Administração (npgadm@ufba.br) on 2022-06-10T18:02:30Z No. of bitstreams: 1 Luis Carlos da SIlva Castro.pdf: 2990443 bytes, checksum: a0a93f7df14bbcdcad26e1186322b2b7 (MD5) Approved for entry into archive by Biblioteca de Administração (bibadm@ufba.br) on 2022-06-16T00:52:28Z (GMT) No. of bitstreams: 1 Luis Carlos da SIlva Castro.pdf: 2990443 bytes, checksum: a0a93f7df14bbcdcad26e1186322b2b7 (MD5) Made available in DSpace on 2022-06-16T00:52:28Z (GMT). No. of bitstreams: 1 Luis Carlos da SIlva Castro.pdf: 2990443 bytes, checksum: a0a93f7df14bbcdcad26e1186322b2b7 (MD5) Previous issue date: 2021-12-02 Ao contribuir para a melhoria da gestão universitária, no âmbito administrativo e acadêmico, a avaliação possui papel relevante nas políticas da Educação Superior do Brasil, e, por isso, a competência e experiência do avaliador são peças fundamentais neste processo. O desenvolvimento de competências e a experiência em avaliação são fatores importantes para a execução eficaz das avaliações, contribuindo para a oferta de serviços de qualidade em ensino, pesquisa e extensão a toda a sociedade. Por isso, esta pesquisa teve como objetivo geral analisar a relação existente entre o desenvolvimento de competências em avaliação autodeclarado pelos avaliadores externos do SINAES e a sua experiência na execução de avaliações, partindo da hipótese de que, quanto maior é a experiência em avaliação, maior é a concordância do avaliador em relação ao desenvolvimento de competências. Esse objetivo foi atingido com a identificação das competências em avaliação mais adequadas ao contexto do SINAES, da verificação da concordância dos avaliadores externos do BASis, em relação ao pleno desenvolvimento das competências em avaliação e da verificação da relação existente entre a concordância dos avaliadores em relação ao desenvolvimento de competências em avaliação, e a experiência do avaliador na execução das avaliações. O processo de coleta de dados aconteceu por meio da utilização do método Delphi, através do qual, os especialistas, mediante consenso, escolheram as competências mais adequadas ao contexto de avaliação do SINAES; e depois, com a utilização do Survey com os avaliadores externos, através do qual coletou-se dados sobre o perfil do avaliador, a experiência em avaliação e o grau de concordância deles em relação ao pleno desenvolvimento de competências em avaliação selecionadas na Delphi. Os resultados da pesquisa evidenciaram que a maioria dos avaliadores da amostra: são mulheres, possuem doutorado, tem entre 21 e 49 anos e concordam totalmente que possuem plenamente desenvolvida as competências em todas dimensões teóricas de competências em avaliação. Também ficou evidenciado que, quanto maior é a quantidade de avaliações feitas, maior é a confiança do avaliador em relatar que possui as competências desenvolvidas. A partir dos resultados obtidos, conclui-se que existe uma relação direta entre a experiência em avaliação e o relato de desenvolvimento de competência do avaliador. Desse modo, as listas de competências em avaliação geradas pelos especialistas podem ser utilizadas no aprimoramento dos cursos de capacitação dos avaliadores do BASis, e este estudo pode estimular a realização de pesquisas que abordem a relação entre experiência em avaliação e desenvolvimento de competências no âmbito de cada dimensão teórica de competência em avaliação. By contributing to the improvement of university management in the administrative and academic sphere, evaluation has a relevant role in the policies of College Education in Brazil and, therefore, the competence and experience of the evaluator are fundamental elements in this process. The development of competencies and experience in evaluation are important factors for the effective execution of evaluation, contributing to the provision of quality services in teaching, research and extension for all society. Therefore, this research aimed to analyze the relationship between the development of self-reported evaluation competencies by external SINAES evaluators and their evaluation experience, based on the hypothesis that the greater the experience in evaluation, the greater the evaluator's agreement in relation to the development of competencies. This objective was achieved by identifying the competencies in evaluation that are most appropriate to SINAES context, verifying the agreement of BASis external evaluator in relation to full development of evaluation competencies and verifying the relationship between the agreement of assessors in relation to the development of competencies in evaluation and the experience of the evaluator in the execution of evaluations. The data collection process took place by a method called Delphi method, through which the experts, by consensus, chose the competencies most appropriate to SINAES evaluation context; and after, by a survey, with external evaluators, through which data were collected on the evaluator's profile, the evaluation experience and their degree of agreement in relation to the full development of competencies in evaluation selected on the Delphi. The survey results showed that most of the sample's evaluators: are women, hold a doctorate and has between 21 and 49 years old and fully agree that they have fully developed competencies in all theoretical dimensions of evaluation competencies. It was also evidenced that the higher is the amount of evaluations made, the greater is the evaluator's confidence in reporting that has fully developed the competencies. From the results obtained, it follows that had a direct relationship between the experience in evaluation and the report of the evaluator's competencies development. In this way, the lists of evaluation competencies obtained by the experts can be used in the improvement of the evaluators' training courses of BASis evaluators, and this study can stimulate research that approach the relationship between evaluation experience and development of competencies on each theoretical dimension of evaluation competencies.
Databáze: OpenAIRE
Externí odkaz: