Avaliação de desempenho no setor público : aplicação de modelos no Ministério da Ciência e Tecnologia

Abstract

As novas demandas utilizadas no setor público cada vez mais se coadunam com a visão do setor privado na busca da eficiência e eficácia, na preocupação com a transparência e prestação de contas. O presente trabalho se configurou a partir da New Public Management e os Modelos de Avaliação de Desempenho desenvolvidos na década de 90. Assim, esses modelos de avaliação de desempenho atendem bem às expectativas das instituições privadas; entretanto, a aplicação desses modelos no setor público é algo que está sendo usado apenas recentemente no Brasil. Este trabalho teve como objetivo verificar a validade de Modelos de Avaliação de Desempenho na mensuração da eficácia, da eficiência, produtividade, qualidade e accountability nas unidades de pesquisas do Ministério da Ciência e Tecnologia (MCT), que fazem uso do planejamento e alinhamento estratégico. Foram estabelecidos 10 construtos (Eficácia, Eficiência, Produtividade, Inovação, Alinhamento, Congruência, Consenso, Custo, Qualidade e Tempo) que fazem parte dos três modelos de avaliação de desempenho e utilizaram-se 78 variáveis, divididas em blocos. Foram aplicados questionários nas 17 Unidades do (MCT) atingindo uma totalidade de 142 questionários. No tratamento dos dados, foi utilizado o software SPSS (Statiscical Package for the Social Sciences). No tocante ao tratamento estatístico, para validar os construtos dos três modelos, foram feitos os seguintes testes: Komogorov-Smirnov, Correlação de Spearman, Qui-Quadrado de Pearson para Independência, Esfericidade de Bartlett e a Medida Kaiser-Meyer-Olkin (Measure of Sampling Adequacy) para a Análise Fatorial, Análise de Clusters e ANOVA. Nas análises de frequências do Bloco I, as variáveis de destaque foram: 1. Prestação de Contas e Transparências nas unidades; 2. O Planejamento Estratégico está alinhado com a sua missão, objetivos e visão de futuro. No teste Qui-Quadrado, nos três modelos, confirmou-se que das 78 variáveis existem 29 que possuem influências com relação às características estruturais e pessoais das Unidades de pesquisas e/ou Organizações Sociais (UPOS). Para Correlação de Spearman, no modelo de Sink e Tuttle, a variável Qualidade e Eficiência nos Processos está associada ao maior número de variáveis, da mesma forma para o Modelo Dixon et al, que tem a variável Foco nos Problemas de Ações Estratégicas nas UPOS, já no modelo Hronec é o Efeito da Qualidade que causa maior correlação. Para cada resultado da Análise Fatorial e Clusters foram analisadas todas as variáveis dos modelos e depois cada um separadamente. Na Análise Fatorial com todas as variáveis foram identificados 5 fatores (Avaliação de Desempenho; Gestão da Inovação; Efetividade; Produção Acadêmica; e Recursos Humanos). Para Análise de Clusters, têm-se três clusters para todas as variáveis dos modelos e em separado. Por fim, conclui-se que o modelo de Sink e Tuttle possui o maior número de variáveis que viabiliza o trabalho e que em linhas gerais atenderia tanto ao planejamento estratégico e o alinhamento, como também as medidas de avaliação de desempenho. O modelo de Dixon et al é o que melhor aplica o planejamento estratégico e o alinhamento, foi o mais consolidado nos resultados e o que apresentou melhores resultados no tratamento estatístico. O modelo Hronec é o que possui menor poder de explicação. AS UPOS na análise de clusters foram identificadas de acordo com 5 grupos: (Grupo 1: INPE, CBPF, INT, IBICT, LNLS e MPEG; Grupo 2: MAST, IMPA e LNCC; Grupo 3: CETEM e INPA; Grupo 4: INSA e CTI; e Grupo 5: LNA e RNP), ou seja, existem fortes indícios que estas UPOS comungam com as mesmas visões estratégicas e dependendo da situação atingem resultados bastantes parecidos na avaliação de desempenho. ______________________________________________________________________________ ABSTRACT

The new requirements employed in the public sector more in line with the vision of the private sector in pursuit of efficiency and effectiveness, the concern for transparency and accountability. The present work is set from the New Public Management and Performance Evaluation Models developed in the 90s. Thus, these models for evaluating the performance very well meet the expectations of private institutions, however, the application of these models in the public sector is something that is being used only recently in Brazil. This work aimed to verify the validity of Models of Performance in the measurement of effectiveness, efficiency, productivity, quality and accountability in research units at the Ministry of Science and Technology (MCT), which make use of a strategic alignment. 10 constructs were established (Effectiveness, Efficiency, Productivity, Innovation, Alignment, Congruence, consensus, Cost, Quality and Time) that are part of the three models and performance evaluation we used 78 variables, divided into blocks. Questionnaires were administered in 17 Units (MCT), reaching a total of 142 questionnaires. In processing the data, we used the SPSS software (Statiscical Package for the Social Sciences). Regarding the statistical analysis, to validate the constructs of the three models, were made the following tests: Komogorov-Smirnov test, Spearman correlation, Pearson Chi-Square for Independence, Bartlett Sphericity and Measure Kaiser-Meyer-Olkin (Measure of Sampling Adequacy) for Factor Analysis, Cluster Analysis and ANOVA. In the frequency analysis of Block I, the variables of focus were: 1. Accountability and Transparency in the plants; 2. The Strategic Plan is aligned with its mission, goals and vision. In the chi-square test, the three models, it was confirmed that there are 29 of the 78 variables that have influence with respect to structural features of drives and personal searches and / or Social Organizations (UPOS). For Spearman's correlation, the Sink and Tuttle model, the variable quality and process efficiency is associated with increased number of variables, as for Model Dixon et al, which has a variable focus on issues of Strategic Actions in UPOS, Hronec is already in the model the effect of quality that causes the greatest correlation. For each factor analysis, and clusters were analyzed all the variables of the models and then each one separately. In factor analysis with all variables were identified five factors (Performance Evaluation, Management of Innovation, Effectiveness, Academic Production, and Human Resources). Cluster Analysis, have three clusters for all models and variables separately. Finally, we conclude that the Sink and Tuttle model has the largest number of variables that enables the work in general and that would meet both the strategic planning and alignment, as well as measures of performance evaluation. The model of Dixon et al is that best applies strategic planning and alignment, it was more consolidated and the results show that the best statistical results. The model is Hronec which has less explanatory power. AS UPOS in the analysis of clusters were identified according to five groups: (Group 1: INPE, CBPF, INT, IBICT, LNLS and MPEG, Group 2: MAST, IMPA and LNCC, Group 3: CETEM and INPA, Group 4: INSA and CTI, and Group 5: LNA and RNP), ie, there are strong indications that these UPOS commune with the same strategic visions and depending on the situation affect the results quite similar in performance evaluation.