PERFORMANCE EVALUATION OF THE ACADEMIC UNITS OF A BRAZILIAN FEDERAL UNIVERSITY USING EFFICIENCY INDICATORS
Abstract
This study aims to analyze the efficiency of Academic Units of a Brazilian Federal University, from performance indicators used by managers of the Undergraduate, Research and Graduate departments. The research carried out was descriptive, following a quantitative approach, and data collection was documentary. The data were analyzed using the data envelopment analysis (DEA) technique. The evaluation followed a census approach, covering the 13 Academic Units of the studied university, covering the period of 2014 to 2018. The main results were: The Academic Units of Education, Nursing, Ocean, Engineering, Law, and Languages were the most efficient regarding the use of their resources by managers of Undergraduate, Research and Graduate areas. The worst results in the period were Biology, and Medicine. The lack of data limited other units that others organizational dimensions were analyzed. It’s suggested to the managers of each academic unit and of the Pro-Rectories the possibility of efficiency evaluations through the availability of performance indicators. In addition, making part of annual calendar of institutional evaluations and, from them, define guidelines and action strategies which can contribute to increase the efficiency of academic units.
References
Abel, L. (2000). Avaliação cruzada da produtividade dos departamentos acadêmicos da UFSC utilizando DEA (Data Envelopment Analysis). (Dissertação de Mestrado), Programa de Pós-Graduação em Engenharia de Produção, Universidade Federal de Santa Catarina, UFSC, SC, Brasil.
Asif, M. & Searcy, C. (2014). A composite index for measuring performance in higher educa-tion institutions. International Journal of Quality & Reliability Management, 31 (9), 983-1001.
Azma, F. (2010). Qualitative Indicators for the evaluation of universities performance. Proce-dia Social and Behavioral Sciences, 2 (2), 5408-5411.
Bandeira, D. L. (2000). Análise da eficiência relativa de departamentos acadêmicos: o caso da UFRGS. (Dissertação de Mestrado), Programa de Pós-Graduação em Administração, Univer-sidade Federal do Rio Grande do Sul, UFRS, Porto Alegre, RS, Brasil.
Banker, R. D. & Charnes, A., Cooper, W. W. (1984). Some models for estimating technical and scale inefficiencies in data envelopment analysis. Management Science, 30 (9), 1078-1092.
Beasley, J. E. (1995). Determining teaching and research efficiencies. Journal of the Opera-tional Research Society, 46, 441-452.
Bernardes, J. F.; Lapolli, E. M.; Ferraresi, A. L. & Wolf, S. M. (2008). Desafios das Universi-dades Empreendedoras: universidade tradicional X universidade corporativa X universidade empresa. Anais do Congresso Latino-Americano Y del Caribe Sobre el Espiritu Empresarial, Florianópolis, SC, Brasil, 19.
Casado, F. L. (2007). Análise envoltória de dados: conceitos, metodologia e estudo da arte na educação superior, Revista Sociais e Humanas, 20 (1), 59-71.
Cavalcante, S. M. A. (2011). Avaliação da eficiência acadêmica dos cursos de graduação da Universidade Federal do Ceará (UFC): utilização de indicadores de desempenho como elementos estratégicos da gestão. (Tese de Doutorado), Programa de Pós-Graduação em Educação Brasileira, Faculdade de Educação, Universidade Federal do Ceará, Fortaleza, CE, Brasil.
Charnes, A.; Cooper, W.W & Rhodes, E. (1978). Measuring the efficiency of decision-making units. European Journal of Operational Research (EJOR), 2 (6), 429-444.
Costa, E. M. (2010). Financiamento, alocação e Eficiência das Instituições Federais de Ensino Superior-IFES. (Tese de Doutorado), Programa de Pós-Graduação em Economia, Universida-de Federal de Pernambuco, Recife, PE, Brasil.
Costa, E. M.; Souza, H. R.; Ramos, F. S. & Silva, J. L. M. (2012). Eficiência e desempenho no ensino superior: uma análise da fronteira de produção educacional das IFES brasileiras. Revista de Economia Contemporânea, 16 (3), 415-440.
Façanha, L. O. & Marrinho, A. (2001). Instituições de ensino superior governamentais e particulares: avaliação comparativa de eficiência. Revista de Administração Pública, 35 (6), 83-105.
Falqueto, A. D. (2001). Mensuração de desempenho empresarial: foco nos indicadores não-financeiros. (Dissertação de Mestrado), Fundação Getúlio Vargas, Rio de Janeiro, RJ, Brasil.
FORPROEX - Fórum de Pró-Reitores de Extensão das Universidades Públicas Brasileiras. (2012). Política Nacional de Extensão Universitária. Manaus, AM, Brasil.
Furtado, L. L. (2014). Análise da eficiência técnica dos Institutos Federais de Educação, Ciência e Tecnologia. (Dissertação de Mestrado), Programa de Pós-Graduação em Ciências Contábeis, Centro de Ciências Jurídicas e Econômicas, Universidade Federal do Espírito Santo, ES, Brasil.
Giacomello, C. P. & Oliveira, R. L. (2014). Análise Envoltória de Dados (DEA): uma propos-ta para avaliação de desempenho de unidades acadêmicas de uma universidade. Revista Gestão Universitária na América Latina - GUAL, 7 (2), 130-151.
Hlandchanko, M. (2015). Balanced Scorecard – a strategic management system of the higher education institution. International Journal of Educational Management, 29 (2), 167-176.
Loureiro, V. C. A. (2017). Desempenho das universidades federais brasileiras: análise da eficiência relativa baseada em indicadores de gestão. (Dissertação de Mestrado), Programa de Pós-Graduação em Administração da Fundação Universidade Federal do Rio Grande, Rio Grande, RS, Brasil.
Mello, J. C. C. B. S.; Meza, L. A.; Gomes, E. G. & Biondi Neto, L. (2005). Curso de Análise Envoltória de Dados. Anais do Simpósio Brasileiro de Pesquisa Operacional, Gramado, RS, Brasil, 37.
Melnyk, S. A.; Bititci, U. S.; Platts, K.; Tobias, J. & Andersen, B. (2014). Is performance measurement and management fit for the future? Management Accounting Research, 25 (2), 173-186.
Milani, I. (1988). Sistemas de avaliação de desempenho: uma revisão de literatura. Revista de Administração, 23 (3), 45-57.
Mintzberg, H. (1995). Criando organizações eficazes. São Paulo: Atlas.
Mitchell; J. J. & Ryder, A. J. (2013). Developing and Using Dashboard Indicators in Student Affairs Assessment. New Directions for Student Services, (142), 71-81.
Mota, F. L. (2014). Eficiência Relativa na Gestão dos Recursos Públicos. Uma Análise do Instituto Federal de Educação, Ciência e Tecnologia da Bahia. (Dissertação de Mestrado), Escola de Administração, Universidade Federal da Bahia, Salvador, BA, Brasil.
Neely, A. (2005). The evolution of performance measurement research - Developments in the last decade and a research agenda for the next. International Journal of Operations & Produc-tion Management, 25 (12), 1264-1277.
Oliveira, N. G. A. (2012). Avaliação de desempenho, produtividade e eficiência: uma aborda-gem aplicando a ferramenta análise envoltória de dados DEA na Universidade Federal do Amazonas. (Dissertação de Mestrado), Programa de Pós-Graduação em Engenharia de Produ-ção, Universidade Federal do Amazonas, Manaus, AM, Brasil.
Paiva, R. C. V. D.; Barbosa, F. V.; Gonçalves, R. G. & Costa, D. D. M. (2014). Educação Superior Privada: Um Estudo do Desempenho Financeiro em nove Instituições de Ensino Superior. Revista Gestão & Tecnologia, 14 (1), 66- 97.
Palácios, F. A. C. (2014). Mudança Estratégica em uma Universidade Pública: Interferência da Interpretação dos Gestores no Processo. AOS - Amazônia, Organizações e Sustentabilida-de, 3 (2), 83-99.
Pereira, C. A. (1993). Estudo de um Modelo Conceitual de Avaliação de Desempenhos para Gestão Econômica. (Dissertação de Mestrado), Faculdade de Economia, Administração e Contabilidade, Universidade de São Paulo, São Paulo, SP, Brasil.
Peter, M. G. A.; Therrien, J. & Peter, F. A. (2004). Aspectos do Projeto Pedagógico Instituci-onal nas Universidades Brasileiras. Anais do Colóquio Internacional Sobre Gestão Universitá-ria na América do Sul, Florianópolis, SC, Brasil, 4.
Scheffer, M. M., Monteiro, J. J., Cardoso, J. V. M., & Ritta, C. de O. (2021). Análise envoltó-ria de dados para avaliação da eficiência financeira das cooperativas de eletrificação do sul do Brasil. Revista Ambiente Contábil, 13(1), 1-20.
Shigunov Neto, A. & Gomes, R. M. (2002). Reflexões sobre a Avaliação de Desempenho: uma Breve Análise do Sistema Tradicional e das novas propostas. Revista Eletrônica de Ciência Administrativa, 1 (1), 1-24.
Sinuany-Stern, Z.; Mehrez, A. & Barboy, A. (1994). Academic departments efficiency via DEA. Computers & Operations Research, 21 (5), 543-556.
Siqueira, J. S. (2015). Eficiência das Universidades Públicas Federais Brasileiras: Um estudo com foco no projeto REUNI. (Dissertação de Mestrado), Programa Multiinstitucional e Inter-regional de Pós-graduação em Ciências Contábeis, Universidade de Brasília, Universidade Federal da Paraíba e Universidade Federal do Rio Grande do Norte, João Pessoa, PA, Brasil.
Teixeira, L. (2013). Avaliação das Instituições Federais de Ensino Superior no Brasil: Uma Análise Teórica e Empírica. (Dissertação de Mestrado), Programa de Pós-Graduação em Administração, Universidade Federal de Viçosa, Viçosa, MG, Brasil.
Verardo, P. L. (2008). Eficiência dos departamentos da Universidade Federal de Viçosa. (Dissertação de Mestrado), Programa de Pós-Graduação em Economia, Universidade Federal de Viçosa, Viçosa, MG, Brasil.
Vieira, E. F. & Vieira, M. M. F. (2003). Estrutura organizacional e gestão do desempenho nas universidades federais brasileiras. Revista de Administração Pública, 37 (4), 899-920.
Yamada, Y.; Matui, T. & Sugiyama, M. (1994). New analysis of efficiency based on DEA. Journal of the Operations Research Society of Japan, 37, 158-167.
Zabolotny, S. R., Frare, A. B., Gomes, D. G. de, & Fernandez, R. N. (2020). Produção científica qualificada: estudo de características acadêmicas de docentes dos Programas Stricto Sensu em Ciências Contábeis da região sul. Avaliação: Revista da Avaliação da Educação Superior (Campinas), 25 (2), 354-374.
POLÍTICA DE DIREITOS AUTORAIS E CONFLITO DE INTERESSES
A Revista Desafio Online (DOn) baseia suas políticas éticas e normas nas diretrizes apresentadas pelo Comimittee on Publication Ethics – COPE (https://publicationethics.org/), em razão de seu compromisso com a qualidade editorial e ética científica.
Dever dos editores e equipe editorial:
- Decidir quais serão os artigos avaliados, baseados em sua qualidade, relevância acadêmica, conteúdo e adequação às diretrizes de submissão, sem discriminar, nenhum autor, por gênero, sexo, raça, orientação sexual, pensamento político, afiliação institucional, religião, naturalidade, nacionalidade, identidade étnico-cultural, ou outra forma de distinção social.
- Decidir e se responsabilizar pelos trabalhos que serão publicados (editor-chefe) seguindo as normas da política editorial, bem como os requisitos legais em vigor, no que se refere ao plágio, violação de direitos autorais e difamação.
- Não divulgar dados dos trabalhos além dos autores, pareceristas e membros do conselho editorial, zelando pela confidencialidade das informações.
- Não utilizar, ou se apropriar, do conteúdo original dos trabalhos submetidos, ainda não publicados.
- Não acompanhar o processo editorial do artigo em caso de existência de conflitos de interesses.
- Garantir que as submissões passem pelo processo de revisão duplo-cega (double-blind), sendo avaliado por, no mínimo, dois pareceristas.
- Atender aos princípios de boas práticas e transparência, averiguando condutas contrárias a estes, apresentando providências adequadas.
Dever dos pareceristas ad hoc:
- Auxiliar o corpo editorial, e os autores, no que tange a escolha das decisões editoriais, realizando a revisão sem qualquer tipo de distinção política, cultural, ou social, dos autores.
- Cumprir o prazo de resposta e data limite da avaliação, comunicando os editores nos casos de impossibilidade de realizar o trabalho.
- Abster-se de realizar a avaliação quando pouco capacitados ou não aptos, sobre o conteúdo do artigo. O declínio também deve ocorrer, na existência de qualquer conflito de interesses existente, por parte do avaliador.
- Respeitar o sigilo dos arquivos recebidos, sem que sejam divulgados, expostos ou conversados os conteúdos dos artigos, sem a permissão do editor-chefe, existindo a necessidade. O conteúdo dos trabalhos não deve ser utilizado para benefício próprio.
- Seguir os critérios de avaliação estipulados nas diretrizes, recomendando ajustes e melhorias, sem nunca realizar críticas ou ataques pessoais aos autores.
- Indicar referências de materiais adicionais que sejam pertinentes ao tema.
- Comunicar, aos editores, a existência de publicações anteriores, do mesmo trabalho.
- Os revisores serão incluídos na lista de pareceristas da Revista Desafio Online (DOn). Havendo a solicitação, eles podem receber uma Declaração de Avaliação formal, do Editor-Chefe. Para isso devem informar o nome completo e CPF, por e-mail.
Dever dos autores:
- Apresentar relatos precisos das submissões, com detalhes e referências necessárias à replicação, por terceiros. Dados implícitos devem ser precisamente apresentados, no artigo. Afirmações propositalmente incorretas, ou deturpadas, são tidas como má conduta ética, sendo inadmissíveis.
- Responsabilizar-se pela elaboração do material submetido, devendo o mesmo ser original, resguardando a autenticidade do conteúdo.
- Informar, através de citações adequadas, fontes de ideias e informações derivadas de outros trabalhos, evidenciando-as nas referências. A apropriação indevida de informações e trechos de trabalhos anteriormente publicados, sem a citação da fonte, se caracteriza como plágio e, nesses casos, o periódico se reserva o direito de rejeitar o trabalho, considerando tal prática antiética e inadmissível.
- Não submeter trabalhos que possuam, de forma substancial, a mesma investigação, para outros periódicos, ou mesmo que já tenha sido, anteriormente, publicado. Trabalhos publicados, anteriormente, em congressos serão aceitos para publicação apenas em caso de parcerias Fast Track com o evento. Artigos derivados de trabalhos de conclusão de curso, dissertações ou teses serão aceitos apenas mediante a inexistência de publicações em outros periódicos ou eventos, devendo, o autor principal, se responsabilizar pela indicação de outras autorias. A Revista Desafio Online respeita o prazo de 12 meses entre publicações de um mesmo autor.
- Atribuir a autoria do trabalho apenas àqueles que fizeram contribuições significativas em sua elaboração, sendo estes indicados como coautores, pelo autor principal, se responsabilizando, integralmente, pelo conteúdo. O autor principal deve fornecer os contatos de e-mails dos envolvidos, e certificar-se de que todos aprovaram a versão final do trabalho, consentindo com sua submissão.
- Declarar qualquer forma existente de conflitos de interesses, bem como apresentar toda e qualquer fonte de auxílio financeiro existente.
- Colaborar, com os editores, quanto à correção e atualização do seu artigo, através de erratas, ao identificar erros ou informações imprecisa que seja relevante na publicação.
- Atentar às decisões editoriais, e ao processo de avaliação e revisão, atendendo, o mais rápido possível, as requisições, mantendo seus dados cadastrados atualizados. Pede-se que as adequações sejam realizadas em até 30 dias, considerando o reenvio dos trabalhos.
- Disponibilizar, caso solicitado, os dados brutos da pesquisa, juntamente com o artigo, para revisão editorial. Os dados utilizados devem se manter acessíveis por, pelo menos, 10 anos após a publicação, considerando a proteção da confidencialidade dos autores, bem como os direitos jurídicos relacionados aos dados.
Arquivamento
A Revista Desafio Online utiliza o sistema LOCKSS. Este é um software livre desenvolvido pela Biblioteca da Universidade de Stanford, que permite preservar revistas online escolhidas ao sondar as páginas das mesmas por conteúdo recém publicado e arquivando-o. Cada arquivo é continuamente validado contra cópias de outras bibliotecas. Caso o conteúdo esteja corrompido ou perdido, as cópias são usadas para restauração.
ÉTICA E ANTIPLÁGIO
Os trabalhos submetidos à Revista Desafio Online (DOn) passarão por software detector de plágio (CopySpider), a qualquer momento, durante o processo editorial. Trabalhos que apresentem mais de 5% de similaridade com outras publicações não serão aceitos, de modo que tais submissões podem ser rejeitadas a qualquer momento, no processo editorial.
Os autores transferem todos os direitos autorais do artigo para a Revista Desafio Online. Qualquer reprodução, total ou parcial, em meios impressos ou eletrônicos, deverá ser solicitada por meio de autorização. A reprodução, caso autorizada, fará constar o competente registro e agradecimento à Revista.
Todos os artigos publicados, online e de livre acesso aos leitores, tem licença Creative Commons, de atribuição, uso não comercial e compartilhamento por ela.
As obras deste site estão licenciadas sob uma Licença Creative Commons Atribuição-NãoComercial-CompartilhaIgual 3.0 Brasil
PUBLICAÇÕES DA EQUIPE EDITORIAL
Não é permitida a submissão de trabalhos pelo editor-chefe e coeditores do periódico, garantindo a imparcialidade no processo editorial.