UNIVERSIDADE FEDERAL DE SANTA CATARINA CENTRO SOCIOECONÔMICO
PROGRAMA DE PÓS-GRADUAÇÃO EM CONTABILIDADE
APOIO À GESTÃO DE DESEMPENHO DO PROGRAMA DE TREINAMENTO VIA MOODLE: ESTUDO DE CASO NA DIRETORIA DA ESCOLA DE ADMINISTRAÇÃO PÚBLICA
BÁRBARA GONÇALVES DO AMARAL
Florianópolis, SC
Bárbara Gonçalves do Amaral
APOIO À GESTÃO DE DESEMPENHO DO PROGRAMA DE TREINAMENTO VIA MOODLE: ESTUDO DE CASO NA DIRETORIA DA ESCOLA DE ADMINISTRAÇÃO PÚBLICA
Dissertação apresentada ao Programa de Pós-Graduação em Contabilidade, da Universidade Federal de Santa Catarina, como parte dos requisitos para obtenção do título de Mestra em Contabilidade.
Orientadora: Prof.ª Sandra Rolim Ensslin, Dr.ª
Florianópolis, SC 2019
através do Programa de Geração Automática da Biblioteca Universitária da UFSC.
Amaral, Bárbara Gonçalves do
Apoio à gestão de desempenho do programa de treinamento via moodle: estudo de caso na Diretoria da Escola de Administração Pública / Bárbara Gonçalves do Amaral ; orientadora, Sandra Rolim Ensslin, 2019.
233 p.
Dissertação (mestrado) - Universidade Federal de Santa Catarina, Centro Sócio-Econômico, Programa de Pós-Graduação em Contabilidade, Florianópolis, 2019. Inclui referências.
1. Contabilidade. 2. Avaliação de desempenho. Programas de treinamento. Metodologia Multicritério de Apoio à Decisão-Construtivista.. I. Ensslin, Sandra Rolim. II. Universidade Federal de Santa Catarina. Programa de Pós-Graduação em Contabilidade. III. Título.
Bárbara Gonçalves do Amaral
APOIO À GESTÃO DE DESEMPENHO DO PROGRAMA DE TREINAMENTO VIA MOODLE: ESTUDO DE CASO NA DIRETORIA DA ESCOLA DE ADMINISTRAÇÃO PÚBLICA
Esta Dissertação foi julgada adequada para obtenção do Título de “Mestra em Contabilidade” e aprovada em sua forma final pelo Programa de Pós-Graduação em Contabilidade.
Florianópolis, 14 de fevereiro de 2019. ________________________
Prof.ª Ilse Beuren, Dr.ª
Coordenadora do Curso de Pós-Graduação em Contabilidade Banca Examinadora:
________________________ Prof.ª Sandra Rolim Ensslin, Dr.ª
Orientadora
Universidade Federal de Santa Catarina
_______________________ Prof.a Fabricia Silva da Rosa, Dr.ª Universidade Federal de Santa Catarina
_______________________ Prof.º Sandro César Bortoluzzi, Dr.
Videoconferência
Universidade Tecnólogica Federal de Paraná
_______________________ Prof.º Sérgio Murilo Petri, Dr. Universidade Federal de Santa Catarina
Dedico à minha família pelo suporte incondicional, carinho e solidariedade. Em especial à Maria Angela Pinheiro (minha avó) e Antônio Lareano do Amaral (meu avô) que deixaram, além de grandes ensinamentos de vida, uma enorme saudade em nossos corações.
AGRADECIMENTOS
A Deus por me guiar nessa etapa e iluminar meus passos diante das tribulações e vicissitudes.
Aos meus pais, Karla Mirella Gonçalves e Elias Oliveira do Amaral, por terem me dado força, perseverança e tenacidade para a realização desta conquista. Agradeço por acreditarem em mim! Sem a sua ajuda esse momento não seria possível.
À minha irmã, Luanna Gonçalves dos Santos, pelas palavras de conforto nos momentos de incertezas.
Ao meu irmão, Matheus Gonçalves do Amaral, pelo companheirismo e incentivo. Por sempre me escutar e reler inúmeras vezes o mesmo texto.
À minha querida orientadora, Sandra Rolim Ensslin, pela oportunidade confiada. Agradeço suas preciosas orientações e auxílio intelectual que foram materializados na qualidade deste estudo. Mas também, pelo constante incentivo e lições de vida. Meu mais sincero agradecimento!
Ao Prof. Ademar pelo apoio constante nas reuniões e por criar as condições necessárias para a realização e conclusão deste estudo.
Aos queridos integrantes do Laboratório Multicritério de Apoio a Decisão-Construtivista por sua receptividade e pelas discussões que oportunizaram enriquecimento profissional e pessoal. Vocês diariamente tornaram essa experiência memorável na minha vida!
À minha colega e amiga, Sandra Mara Iesbik Valmorbida, por suas incontáveis horas de ajuda a este estudo e paciência em escutar todos os áudios. Agradeço pelos imprescindíveis conselhos e por todas as risadas e lágrimas nesses dois anos.
Aos professores do Programa de Pós-Graduação de Contabilidade – PPGC, da Universidade Federal de Santa Catarina, que foram formidáveis na transmissão de seus ensinamentos e por suas constantes motivações e apoio ao perseguir a carreira acadêmica.
Á Coordenação do PPGC pelo acolhimento do Programa e, em especial, à Maura Paula Miranda Lopes que sempre foi paciente e proativa em sanar qualquer dúvida ou problema.
Às amigas PPGC, Celliane Ferraz Pazetto, Cristiane Aparecida Da Silva e Stefânia Maria Maier, por sua amizade e pelo apoio moral nesse processo de aprendizagem.
Aos colegas do mestrado da Turma de 2017 pela amizade que construímos ao longo dessa etapa, pelo estímulo constante e por seus inúmeros ensinamentos.
Ao Núcleo de Pesquisas em Controladoria e Sistemas de Controle Gerencial ‒ NUPEC e ao Núcleo de Controladoria – NUPECON pelas divertidas horas no almoço e café e pelas maravilhosas visitas.
Aos decisores por sua disponibilidade incondicional, paciência e dedicação no desenvolvimento deste estudo.
Aos Diretores da DEAPVirtual pela valiosa contribuição na coleta de dados.
Aos meus amados amigos pelo importante papel na minha vida. Agradeço o imenso afeto e constante compreensão e apoio nessa etapa. Vocês foram maravilhosos!
A todas as pessoas, cujo nome não foi citado devido à inviabilidade de listar todas, mas que participaram, direta ou indiretamente, em algum momento deste estudo. Agradeço imensamente suas palavras de carinhos.
Por fim, agradeço à Coordenação de Aperfeiçoamento de Pessoal de Nível Superior-CAPES pelo suporte financeiro que tornou possível minha dedicação exclusiva ao mestrado.
“Tudo é considerado impossível, até acontecer.”
RESUMO
O presente trabalho foi realizado com apoio da Coordenação de Aperfeiçoamento de Pessoal de Nível Superior - Brasil (CAPES) - Código de Financiamento 001. A Diretoria da Escola de Administração Pública (DEAP) preza pela missão atual da Escola Virtual de Administração Pública (DEAPVirtual) em desenvolver as competências dos servidores públicos estaduais para promover as excelências profissional e organizacional em seus serviços à sociedade. Nesta pesquisa, os decisores priorizaram analisar a problemática vivenciada no contexto do ambiente virtual de aprendizagem, executado por meio do software livre Modular Object-Oriented Dynamic Learning Environment (Moodle). Os decisores necessitam de um modelo de desempenho que apoie a gestão da DEAP no seu programa de treinamento, para assim identificar subsídios para respaldar o contexto decisional, monitorar o desempenho, evidenciar os resultados gerados e recomendar ações de melhorias. Verificou-se por meio do Knowledge Development Process-Constructivist (ProKnow-C) que essa problemática da DEAP também representa uma lacuna de pesquisa, ao visar na gestão interna do programa de treinamento. Nesse contexto, a pesquisa tem como objetivo geral construir um modelo de Avaliação de Desempenho, focando uma abordagem epistemológica Construtivista para apoiar a Gestão do Programa de Treinamento, via Moodle, da Secretaria de Estado da Administração de Santa Catarina (SEA-SC), segundo as necessidades e percepções da gestora da DEAP. Para isso, utilizou-se, como instrumento de intervenção, a metodologia Multicritério de Apoio à Decisão-Construtivista (MCDA-C) para a construção do modelo. Por meio de entrevistas semiestruturadas com a gestora da DEAP e com o administrador da SEA-SC, foram identificados 38 EPAs. Esses EPAs foram desmembrados em 60 conceitos. Os conceitos foram agrupados em áreas de preocupação, sendo elas: (i) Gestão da evasão; (ii) Temas dos cursos; (iii) Criação das parcerias; e (iv) Gestão interna. Para avaliar o desempenho do Programa de Treinamento da DEAP, foram construídos 39 descritores. Após a construção dos descritores, foram elaboradas ações de melhorias. O modelo foi considerado pelos decisores da DEAP legítimo ao contemplar suas preocupações e os aspectos ambientais que compreendem seu contexto de gestão. Em termos teóricos esta pesquisa busca demonstrar a potencialidade dos dois instrumentos metodológicos utilizados para construção de conhecimento junto a decisora e o facilitador. O ProKnow-C facilita a construção do modelo, ao
proporcionar uma compreensão sobre a mensuração e gestão na área de Avaliação de Programas de Treinamento. Esta compreensão influencia a execução das etapas de Contextualização, Árvore de pontos de vistas e desenvolvimento dos descritores. Os indicadores do PB possuem foco multidimensional na mensuração do programa, no entanto se concentram nos níveis de Kirkpatrick. A metodologia MCDA-C supera a dificuldade do modelo de Kirkpatrick e seus derivados ao levar em consideração o know-how do gestor e suas necessidades e objetivos para o processo decisório sem impor os níveis de Avaliação do Programa. Palavras-chave: Avaliação de Desempenho. Pesquisa. Programas de Treinamento. Metodologia Multicritério de Apoio à Decisão-Construtivista.
ABSTRACT
This study was financed in part by the Coordenação de Aperfeiçoamento de Pessoal de Nível Superior - Brasil (CAPES) - Finance Code 001. The Diretoria da Escola de Administração Pública (DEAP) praised the current mission of the Escola Virtual de Administração Pública (DEAPVirtual) in developing the skills of state public servants to promote professional and organizational excellence in their services to society. In this research the decision makers prioritized to analyze the problematic experienced in the context of the virtual learning environment, executed through the free software Modular Object-Oriented Dynamic Learning Environment (Moodle). Decision makers need a performance model that supports the management of DEAP in their training program, to identify subsidies to support the decision-making context, monitor performance, evidence the results generated and recommend actions for improvement. In this context, the research aims to build a Performance Evaluation model, focusing on a Constructivist epistemological approach to support the Management of the Training Program, via Moodle, of the Secretaria de Estado da Administração de Santa Catarina (SEA-SC), second the needs and perceptions of the DEAP manager. For this purpose, the Multicritério de Apoio à Decisão-Construtivista (MCDA-C) was used as an intervention tool to construct the model. It was verified through ProKnow-C that this problem of DEAP also represents a research gap, when aiming at the internal management of the training program. This research seeks to demonstrate the influence of these two instruments in their execution. Through semi-structured interviews with the DEAP manager and the SEA-SC administrator, 38 EPAs were identified. These EPAs were dismembered into 60 concepts. The concepts were grouped in areas of concern, being: (i) Management of evasion; (ii) Course themes; (iii) Creation of partnerships; and (iv) Internal management. To evaluate the performance of the DEAP training program, 39 descriptors were constructed. After the construction of the descriptors, improvement actions were elaborated. The model was considered by DEAP decision makers to address their concerns and the environmental aspects that comprise their management context. In theoretical terms this research seeks to demonstrate the potential of the two methodological tools used to build knowledge with the decision maker and facilitator. ProKnow-C facilitates the construction of the model by providing an understanding of measurement and management in the area of Evaluation of Training Programs. This understanding influences the execution of the stages of
Contextualization, Tree of points of view and development of the descriptors. PB indicators have a multidimensional focus on program measurement, however, they focus on Kirkpatrick levels. The MCDA-C methodology overcomes the difficulty of the Kirkpatrick model and its derivatives by taking into account the manager's know-how and its needs and objectives for the decision-making process without imposing the Program Evaluation levels.
Keywords: Performance Evaluation. Search. Training Programs. Multicritério de Apoio à Decisão-Construtivista (MCDA-C).
LISTA DE FIGURAS
Figura 1 - Fluxograma das etapas do Knowledge Development
Process-Constructivist ... 29
Figura 2 - Processo de busca do Portfólio Bibliográfico de Avaliação de Desempenho ... 31
Figura 3 - Processo de Busca do Portfólio Bibliográfico de Avaliação de Programas de Treinamento ... 37
Figura 4 - Processo de Busca do Portfólio Bibliográfico do uso da metodologia MCDA-C ... 42
Figura 5 - Passo a passo da pesquisa ... 49
Figura 6 - Roteiro da entrevista ... 51
Figura 7 - Variáveis Básicas ... 53
Figura 8 - Variável Avançada, de Behn (2003) ... 54
Figura 9 - Variáveis Avançadas de aspectos gerais de Avaliação de Desempenho ... 55
Figura 10 - Fases da metodologia MCDA-C ... 58
Figura 11 - Interação do ProKnow-C na Fase da Estruturação da metodologia MCDA-C ... 61
Figura 12 - Evolução da Avaliação de Desempenho ... 65
Figura 13 - Aspectos da Avaliação de Desempenho ... 70
Figura 14 - Elementos da Avaliação de Programas de Treinamento ... 74
Figura 15 - Integrated Model of Training Evaluation and Effectiveness ... 80
Figura 16 - The Four-phase Evaluation System for Evaluating Training Programs ... 82
Figura 17 - Modelo de pesquisa Mourão & Andrade (2005) ... 84
Figura 18 - Training Programme Measurement Model ... 86
Figura 19 - Framework for Summative Evaluation Phase Within Systematic Training ... 87
Figura 20 - Alinhamento entre Avaliação de Desempenho e Avaliação de Desempenho de Programas de Treinamento ... 92
Figura 21 - Cruzamento de autores do PB e das Referências Internacionais ... 93
Figura 22 - Cruzamento de autores do PB e das Referências Nacionais94 Figura 23 - Artigos Internacionais mais citados do PB ... 96
Figura 24 - Artigos nacionais mais citados do PB ... 98
Figura 25 - Evolução Temporal dos Artigos Internacionais e Nacionais ... 99
Figura 26 - Periódicos presentes no PB Internacional ... 100
Figura 28 - Palavras-chave presentes no PB Internacional ... 103
Figura 29 - Palavras-chave presentes no PB Nacional ... 104
Figura 30 - Artigos Internacionais e Nacionais por Países ... 105
Figura 31- Parcerias por instituições ... 106
Figura 32 - Medidas para Avaliar o desempenho, de Behn (2003) ... 108
Figura 33 - Medidas para Controlar o comportamento, de Behn (2003) ... 109
Figura 34 - Medidas para Alocação Orçamentária, de Behn (2003) ... 110
Figura 35 - Medidas para Motivar os colaboradores, de Behn (2003) 111 Figura 36 - Medidas para Promover a competência, de Behn (2003) . 112 Figura 37 - Medidas para Celebrar o desempenho, de Behn (2003) ... 113
Figura 38 - Medidas para Aprender o desempenho, de Behn (2003) .. 114
Figura 39 - Medidas para Melhorar o desempenho, de Behn (2003) .. 116
Figura 40 - Aspecto da estratégia ... 117
Figura 41 - Aspecto do ambiente ... 119
Figura 42 - Aspecto de aprendizagem social ... 120
Figura 43 - Aspecto cultura ... 121
Figura 44 - Aspecto partes interessadas ... 122
Figura 45 - Aspecto de recompensa ... 123
Figura 47 - Aspecto foco da Avaliação de Desempenho ... 124
Figura 48 - Lente 1 ... 125 Figura 49 - Lente 2 ... 127 Figura 50 - Lente 3 ... 128 Figura 51 - Lente 4 ... 129 Figura 52 - Lente 5 ... 129 Figura 53 - Lente 6 ... 130
Figura 54 - Desafios futuros para Avaliação de Programas de Treinamento ... 133
Figura Figura 55 - Esquema sobre a interação da metodologia MCDA-C com o decisor ... 134
Figura 56 - Família de Pontos de Vista e teste quanto à necessidade e suficiência dos pontos de vista ... 142
Figura 57 - Mapa Cognitivo de Evasão... 144
Figura 58 - Mapa Cognitivo de Evasão com Cluster e Subcluster ... 145
Figura 59 - Estrutura Hierárquica de Valor de Evasão ... 147
Figura 60 - Descritores de Evasão ... 148
Figura 61 - Percepção sobre aspectos da literatura com a percepção dos decisores ... 158
LISTA DE TABELAS
Tabela 1 - Quantidade exportada por base do Portfólio Bibliográfico de
Avaliação de Desempenho ... 30
Tabela 2 - Portfólio Bibliográfico de Artigos Internacionais de Avaliação de Desempenho ... 32
Tabela 3 - Portfólio Bibliográfico de Artigos Nacionais de Avaliação de Desempenho ... 34
Tabela 4 - Quantidade exportada por base do Portfólio Bibliográfico de Avaliação de Programas de Treinamento ... 36
Tabela 5 - Portfólio Bibliográfico de Artigos Internacionais de Avaliação de Programas de Treinamento ... 38
Tabela 6 - Portfólio Bibliográfico de Artigos Nacionais de Avaliação de Programas de Treinamento ... 40
Tabela 7 - Quantidade exportada por base do Portfólio Bibliográfico de estudos que fizeram uso da metodologia MCDA-C ... 41
Tabela 8 - Portfólio Bibliográfico de Artigos Internacionais e Nacionais que fizeram uso da metodologia MCDA-C ... 43
Tabela 9 - Parâmetro de Sampieri, Collado e Lucio (2013) ... 45
Tabela 10 - Gravações ... 52
Tabela 11 - Lentes Análise, de Ensslin et al. (2010) ... 56
Tabela 12 - Ferramentas ... 77
Tabela 13 - Indicadores ... 87
Tabela 14 - Estudos análogos ... 89
Tabela 15 - Atores ... 136
Tabela 16 - Exemplos de EPAs e Conceitos construídos ... 140
Tabela 17 - Recomendações para melhoria do desempenho para gestão da evasão do programa de treinamento, via Moodle, da DEAP ... 149
Tabela 18 - Recomendações para melhoria do desempenho para gestão de temas do programa de treinamento, via Moodle, da DEAP ... 150
Tabela 19 - Recomendações para melhoria do desempenho para gestão de criação de parcerias programa de treinamento, via Moodle, da DEAP ... 152
Tabela 20 - Recomendações para melhoria do desempenho para gestão interna do programa de treinamento, via Moodle, da DEAP ... 154
LISTA DE ABREVIATURAS E SIGLAS CAPES Coordenação de Aperfeiçoamento de Pessoal
de Nível Superior
EPA Elemento Primário de Avaliação FPV Família de Ponto de Vista
SEA-SC Secretaria de Estado da Administração de Santa Catarina
DEAP Diretoria da Escola de Administração Pública DEAPVirtual Escola Virtual de Administração Pública LabMCDA-C Laboratório de Metodologias Multicritério de
Apoio à Decisão
MCDA-C Multicritério de Apoio à Decisão-Construtivista PB Portfólio Bibliográfico
ProKnow-C Knowledge Development Process- Constructivist
SUMÁRIO 1 INTRODUÇÃO ... 19 1.1 PROBLEMA DE PESQUISA ... 21 1.2 OBJETIVOS ... 21 1.2.1 Objetivo geral ... 21 1.2.2 Objetivos específicos ... 21 1.3 JUSTIFICATIVA DA PESQUISA ... 22 1.4 DELIMITAÇÕES DA PESQUISA... 24 1.5 ESTRUTURA DA PESQUISA... 24 2 METODOLOGIA DA PESQUISA ... 26 2.1 ENQUADRAMENTO METODOLÓGICO ... 26 2.2 PROCEDIMENTO DE SELEÇÃO DO MATERIAL QUE IRÁ COMPOR A FUNDAMENTAÇÃO TEÓRICA ... 27 2.2.1 Instrumento de intervenção ‒ ProKnow-C ... 28 2.2.2 Processo de Seleção do Portfólio Bibliográfico referente à Avaliação de Desempenho ... 29 2.2.3 Processo de Seleção do Portfólio Bibliográfico referente à Avaliação de Desempenho de Programas de Treinamento ... 35 2.3 PROCEDIMENTO DE SELEÇÃO DO MATERIAL QUE DARÁ
SUPORTE À APRESENTAÇÃO DO INSTRUMENTO DE
INTERVENÇÃO PARA A CONSTRUÇÃO DO MODELO
CONSTRUTIVISTA ... 41 2.4 PROCEDIMENTOS PARA A COLETA E ANÁLISE DOS DADOS 44
2.4.1 Parâmetro para pesquisa qualitativa... 44 2.4.2 Passo a passo da pesquisa e entrevista ... 48 2.4.3 Análise Bibliométrica e Análise Sistêmica ... 52 2.4.4 Instrumento de Intervenção: Metodologia Multicritério de Apoio à Decisão-Construtivista (MCDA-C) ... 57 2.4.5 Congruência entre os Instrumentos de Intervenção ... 59 3 FUNDAMENTAÇÃO TEÓRICA ... 62 3.1 AVALIAÇÃO DE DESEMPENHO ... 62
16
3.1.1 Evolução da Avaliação de Desempenho ... 62 3.1.2 Conceitos e aspectos de Avaliação de Desempenho ... 66 3.2 AVALIAÇÃO DE DESEMPENHO DE PROGRAMAS DE TREINAMENTO ... 70 3.2.1 Conceitos e aspectos de Avaliação de Programas de Treinamento ... 71 3.2.2 Ferramentas e Indicadores identificados ... 77 3.2.3 Estudos análogos a respeito de Avaliação de Programas de Treinamentos ... 88 3.3 ALINHAMENTO ENTRE O PB DE AVALIAÇÃO DE DESEMPENHO E O PB DE AVALIAÇÃO DE PROGRAMAS DE TREINAMENTO ... 90
4 RESULTADO DAS ANÁLISES BIBLIOMÉTRICA E
SISTÊMICA ... 93 4.1 RESULTADOS DA ANÁLISE BIBLIOMÉTRICA ... 93 4.2 RESULTADOS DA ANÁLISE SISTÊMICA ... 125 4.3 DISCUSSÕES DAS ANÁLISES BIBLIOMÉTRICA E SISTÊMICA ... 130 5 CONSTRUÇÃO DO MODELO DE AVALIAÇÃO DE
DESEMPENHO CONSTRUTIVISTA UTILIZANDO A
METODOLOGIA MCDA-C ... 135 5.1 FASE DE ESTRUTURAÇÃO ... 135 5.1.1 Contextualização ou abordagens soft para estruturação ... 135 5.1.2 Árvore de Pontos de Vista ... 138 5.1.3 Construção dos descritores do modelo ... 143 5.2 FASE DE RECOMENDAÇÕES ... 149 5.3 DISCUSSÕES ENTRE A PERCEPÇÃO DA LITERATURA E MODELO ... 156 6 CONSIDERAÇÕES FINAIS ... 161 REFERÊNCIAS ... 165 APÊNDICE A - Termo de Consentimento Livre e Esclarecido ... 178 APÊNDICE B - Protocolo Ético do Estudo de Caso ... 182 APÊNDICE C - Protocolo Ético da Pesquisa ... 182 APÊNDICE D - Perguntas para entrevista ... 186
APÊNDICE E - Indicadores ... 188 APÊNDICE F - Elementos Primários de Avaliação e Conceitos .. 214 APÊNDICE G - Mapas Cognitivos ... 219 APÊNDICE H - Mapas Cognitivos com Clusters e Subclusters ... 222 APÊNDICE I - Estrutura Hierárquica de Valor ... 225 APÊNDICE J - Descritores ... 227 APÊNDICE K - Relato de experiência ... 232
1 INTRODUÇÃO
A Administração Pública demanda competências adequadas para atender às necessidades de seu aparato estatal e da sociedade. Essas necessidades seriam, sobretudo, a melhoria da eficiência e eficácia dos serviços públicos prestados (Sims, 1993).
Diante desse cenário, a Administração Pública tem seus servidores públicos como agentes essenciais na oferta de bens e serviços públicos de qualidade à sociedade. Destarte, a gestão pública necessita de servidores públicos capacitados em virtude de a qualidade dos serviços ser compelida pela melhoria do desempenho individual dos servidores (Huque & Vyas, 2008, Getha-Taylor et al., 2015, Suliyanto & Setyawati, 2015, Lee et al., 2017).
A gestão pública, para assegurar o desenvolvimento permanente do servidor público, utiliza, como estratégia, capacitar seus servidores públicos por meio de programas de treinamentos (Sims, 1993, Healy, 2001, Huque & Vyas, 2008, Suliyanto & Setyawati, 2015, Kucherov & Manokhina, 2017).
Os programas de treinamento visam contribuir para o desenvolvimento das competências institucionais, por promover o aperfeiçoamento e a atualização do capital intelectual dos servidores (Tasca et al., 2010, Suliyanto & Setyawati, 2015, Kucherov & Manokhina, 2017).
Na gestão pública, do estado de Santa Catarina, os programas de treinamento podem ser ofertados pelas Escolas Virtuais de Administração Pública, as quais propiciam aos servidores obterem um conjunto de conhecimentos, habilidades e atitudes imperativas no desempenho de suas atividades profissionais (Portal Servidor, 2018).
Dada a capacidade dessas Escolas Virtuais interferirem na dinâmica e qualidade da prestação de serviços públicos e no desempenho dos servidores, há a necessidade de um processo de avaliação de seus Programas de Treinamento (Tasca et al., 2010).
A Avaliação de Programas de Treinamento proporciona aos gestores públicos mensurar a efetividade de seus programas e, consequentemente, determinar para a instituição o valor que o treinamento agrega ao serviço prestado (Healy, 2001, Huque & Vyas, 2008, Suliyanto & Setyawati, 2015, Lee et al., 2017).
A avaliação do desempenho nos Programas de Treinamento sobrevém da preocupação de se adquirir informações a respeito do impacto do Programa de Treinamento, em especial na aplicabilidade dos cursos nos cargos públicos (Sims, 1993, Suliyanto & Setyawati, 2015,
20
Lee et al., 2017). Adicionalmente, a mensuração contribui para apoiar a gestão do Programa de Treinamento ao propiciar feedback para os gestores e planejadores do programa, bem como para a instituição ao mapear o quanto sua contribuição se incorpora ao alinhamento estratégico dessa instituição (Sims, 1993, Healy, 2001, Huque & Vyas, 2008, Suliyanto & Setyawati, 2015, Lee et al., 2017).
Na literatura de Avaliação de Programa de Treinamento, a carência de estudos construtivistas sobre Avaliação de Programas de Treinamento com foco em Educação a Distância. Além, da crescente discussão de utilizar aprendizagem como elemento principal para mensurar o Programa. Esta pesquisa visa explorar essas lacunas.
Devido à importância do processo de Avaliação de Programas de Treinamento, a DEAPVirtual gerenciada pela Diretoria da Escola de Administração Pública (DEAP), a qual visa impelir a profissionalização dos servidores públicos ao promover programas de treinamento, reconhece a necessidade de um processo formal e sistemático para avaliar seu Programa de Treinamento.
A gestão atual da DEAP, com a ausência de um modelo que mensure a efetividade da gestão do programa de treinamento, via Moodle, não consegue estipular seu statu quo. Isso impossibilita a DEAP identificar em que aspectos apresentam desempenho aquém do esperado (comprometedor) e consequentemente gerir seu Programa.
A dificuldade da DEAP em gerir o Programa por não compreender seu perfil atual afetaria a estruturação de um planejamento adequado. A elaboração de um mau planejamento impactaria no desenvolvimento de metas sobre o crescimento e indicadores que medem resultados.
O desenvolvimento falho de indicadores, neste caso (DEAP/SC), a falta de indicadores na avaliação do Programa da DEAP pode inibir um conhecimento mais aprofundado sobre os processos internos.
Desse modo, a falta de conhecimento nos processos internos prejudica a identificação do que pode ser aperfeiçoado no programa e o engajamento da DEAP no envolvimento de políticas de redução de custos, por exemplo. Neste contexto, diante da crise econômica, a gestão da DEAP, junto com a SEA-SC, necessita traçar planos para treinar seus servidores sem aumentar demasiadamente suas despesas. Outro exemplo advindo da investigação dos processos internos poderia resultar na demonstração de como a equipe da DEAP vem conduzindo seu próprio pessoal e se eles estão motivados. A falta de motivação da equipe pode prejudicar a qualidade e crescimento do programa.
Assim, a Avaliação de Programa de Treinamento proporcionaria à DEAP respaldar seus planos de ação frente às reuniões departamentais ao solicitar investimentos tanto de pessoas como de recursos financeiros para seu programa. Em virtude disso, a DEAP comprovaria sua a efetividade e utilidade do seu Programa respondendo ao dilema enfrentado pela Gestão de Pessoas, da SEA-SC, a respeito da relação custo-benefício em treinar seus servidores. O treinamento precisa acarretar resultados que, no futuro, serão convertidos em ganhos para o órgão.
Neste contexto, a avaliação do Programa de Treinamento da DEAP ocasionaria um diagnóstico do programa perante qualidade, necessidade e limitações o que permitiria o monitoramento e aperfeiçoamento (gestão) dos aspectos avaliados.
1.1 PROBLEMA DE PESQUISA
Diante desse contexto, emerge a questão de pesquisa: Quais aspectos devem ser levados em consideração para avaliar o desempenho do Programa de Treinamento, da Secretaria de Estado da Administração de Santa Catarina, de modo que apoiem a tomada de decisão da gestora da Diretoria da Escola de Administração Pública (DEAP)?
1.2 OBJETIVOS
Para responder a essa questão de pesquisa, este estudo apresenta os objetivos geral e específicos.
1.2.1 Objetivo geral
O objetivo geral é construir um modelo de Avaliação de Desempenho, focando uma abordagem epistemológica Construtivista para apoiar a Gestão do Programa de Treinamento, via Moodle, da Secretaria de Estado da Administração de Santa Catarina (SEA-SC), segundo as necessidades e percepções da gestora da Diretoria da Escola de Administração Pública (DEAP).
1.2.2 Objetivos específicos
Com o propósito de culminar o objetivo geral definido, destinam-se os destinam-seguintes objetivos estipulados:
22
(i) Realizar a análise crítica das publicações científicas referentes ao fragmento da literatura Avaliação de Desempenho de Programas de Treinamento.
(ii) Identificar os objetivos necessários e suficientes para a gestão do Programa de Treinamento e construir suas respectivas escalas ordinais (qualitativas), segundo a percepção da Diretoria da Escola de Administração Pública (DEAP), de modo que possibilite a identificação do perfil de desempenho (statu quo) do atual Programa de Treinamento. (iii) Gerar subsídios à gestão do Programa de Treinamento, recomendando ações de aperfeiçoamentos com base no perfil de desempenho identificado.
(iv) Cotejar as ferramentas e aspectos (indicadores) identificados na literatura com os do modelo construído.
1.3 JUSTIFICATIVA DA PESQUISA
A pesquisa respalda sua justificativa nos seis critérios de Sampieri, Collado & Lucio (2013) para avaliar sua utilidade, sendo eles: conveniência, relevância social, implicações práticas, valor teórico, utilidade metodológica e viabilidade em relação ao tempo, recursos e habilidades.
Quanto à conveniência, a pesquisa é oportuna por buscar uma abordagem mais interpretativa e menos positivista para compreender a Avaliação de Desempenho da DEAP, posto que a literatura de Avaliação de Desempenho carece de tais pesquisas (Bititci et al., 2012).
Em relação à relevância social, a pesquisa beneficia principalmente a gestora da DEAP e as pesquisas teóricas e empíricas no estudo de Avaliação de Programas de Treinamento. Esta pesquisa apoia a importância dos Programas de Treinamento na execução dos trabalhos dos servidores públicos. Assim, ao avaliar os Programas de Treinamento, e consequentemente melhorá-los rumo ao alinhamento estratégico da instituição, acredita-se promover qualidade nos serviços públicos prestados.
No que se refere às implicações práticas, esta pesquisa auxilia a Diretora (gestora) da DEAP na solução de seu problema real: a falta de um processo sistemático para apoiar a gestão do Programa de Treinamento. Esse processo permitirá expandir o conhecimento da gestora sobre seu contexto de atuação. Esta pesquisa também pode
auxiliar a Administração Pública Estadual a verificar a efetividade do Programa de Treinamento, via Moodle, da DEAP, conforme apontado pela Lei Complementar n. 381, de 7 de maio de 2007.
Quanto ao valor teórico, a pesquisa pretende explorar a lacuna na área de Avaliação de Programas de Treinamento. Esta pesquisa foca o processo de gestão interna do Programa de Treinamento da DEAP; entretanto, de forma indireta, o aperfeiçoamento do Programa promove a aprendizagem dos servidores submetidos ao treinamento, atendendo assim, ao clamor de vários estudos (Moffie, Calhoon & O'Brien, 1964; Mann & Robertson, 1996; Healy, 2001; Alvarez, Salas & Garofano, 2004; Birdi, 2005; Schröeder et al., 2005; Wang & Wilcox, 2006; Steensma & Groeneveld, 2010; Xavier, Martins & Lima, 2011; Tasca, Ensslin & Ensslin, 2012; Cremonezi, Giuliani & Pizzinatto, 2013; Grohmann & Kauffeld, 2013; Mourão, Abbad e Zerbini, 2014; Camolesi & Cremonezi, 2015; Suliyanto & Setyawati, 2015; Jeschke et al., 2017; Muhaisen & Asour, 2017; Lucas et al., 2017; Rahim, 2017). Assim, aprendizagem é o produto do treinamento, mas não é a única variável que representa a qualidade do Programa para os decisores da DEAP. Ademais, com o desenvolvimento da análise criteriosa do tema, foi possível sugerir oportunidades futuras.
Com a utilização do Knowledge Development Process- Constructivist (Proknow-C) - instrumento para seleção e análise crítica da literatura -, observaram-se poucos estudos sobre Avaliação de Programas de Treinamento com foco em Educação a Distância (Schröeder et al., 2005; Mourão, Abbad & Zerbini, 2014). Embora estes estudos nacionais abordem o tema investigado não seguem uma abordagem interpretativista. Assim, esta pesquisa procura sanar essa lacuna ao avaliar Programas de Treinamento no contexto da Educação a Distância informada por uma abordagem epistemológica construtivista. Outra lacuna encontrada na literatura internacional e na nacional seria a carência de estudos relacionando Avaliação de Desempenho Organizacional à Avaliação de Programas de Treinamento.
Adicionalmente, cumpre salientar o fato de esta pesquisa em termos teóricos demonstrar a potencialidade dos dois instrumentos metodológicos (ProKnow-C e metodologia MCDA-C) utilizados para construção de conhecimento junto aos decisores (diretora e administrador) e a facilitadora.
Em relação à utilidade metodológica, a pesquisadora seguiu uma abordagem Construtivista nos procedimentos metodológicos, a fim de respeitar as preferências da gestora (diretora da DEAP) e expandirem
24
seu conhecimento. Esta metodologia possibilita a geração de conhecimento e aprendizagem no decisor.
No tocante à viabilidade em relação ao tempo, recursos e habilidades, a pesquisa foi programada e feita dentro do tempo adequado para a elaboração das análises e da construção do modelo.
Também foi viável pela facilidade de consultar os artigos disponíveis no Portal de Periódicos da CAPES para construir a fundamentação teórica, além do interesse dos decisores (diretora da DEAP e administrador da SEA) na construção do instrumento de gestão.
Esta pesquisa justifica-se principalmente pelo valor teórico e também pela relevância prática.
1.4 DELIMITAÇÕES DA PESQUISA
A presente pesquisa destina-se à construção de um modelo de avaliação de desempenho qualitativo sob a perspectiva epistemológico- construtivista para auxiliar a gestora da DEAP, onde será desenvolvido o estudo de caso. Essa perspectiva seguida pela pesquisadora resulta em um modelo construído com base nas percepções, valores e motivações dos decisores atuais. Igualmente, há como delimitação apenas a consulta de artigos científicos publicados em periódicos e a escolha das bases de dados para fundamentar a pesquisa.
Também se evidencia como demilitação a execução da primeira e da terceira fase da metodologia Multicritério de Apoio à Decisão-Construtivista (MCDA-C): a Fase de Estruturação e a Fase de Recomendações.
1.5 ESTRUTURA DA PESQUISA
Esta pesquisa é composta de cinco capítulos. O primeiro capítulo salienta a Introdução, que abrange a contextualização, o problema de pesquisa, os objetivos, a justificativa, as delimitações e a estrutura desta pesquisa.
No capítulo 2, demonstra-se a Metodologia da Pesquisa, composta por enquadramento metodológico, procedimentos para seleção do material que irá compor a fundamentação teórica e o instrumento utilizado para a seleção e, a análise crítica da literatura e o instrumento de intervenção utilizado para a construção do modelo.
No capítulo 3, aborda-se a Fundamentação Teórica que contempla a Avaliação de Desempenho e a Avaliação de Desempenho de Programas de Treinamento.
No capítulo 4, apresenta-se a execução das Análises Bibliométrica e Sistêmica.
No capítulo 5 demonstra-se o processo de construção do modelo, bem como a análise e discussão do modelo construído com o cotejamento das ferramentas e aspectos (indicadores) de desempenho sugeridos pela literatura.
No capítulo 6, explanam-se as Considerações Finais. Por fim, estão as Referências e evidencia-se a lista de Apêndices.
2 METODOLOGIA DA PESQUISA
Neste capítulo, será apresentada a metodologia adotada no estudo composta por: (i) Enquadramento metodológico; (ii) Procedimentos para seleção do material que norteia a fundamentação teórica; (iii) Procedimento de seleção do material para apresentação do instrumento que infromará a construção do modelo construtivista; e (iv) Procedimentos para coleta e análise dos dados.
2.1 ENQUADRAMENTO METODOLÓGICO
Nesta seção, o Enquadramento Metodológico será constituído quanto à lógica, à natureza da pesquisa, à abordagem do problema, ao processo de coleta de dados, e ao procedimento técnico da pesquisa.
Esta pesquisa é caracterizada como lógica indutiva (Sampieri, Collado & Lucio, 2013), visto que não havia conhecimento a respeito dos aspectos a serem levados em consideração para avaliar o desempenho do Programa de Treinamento da DEAP.
Em relação à natureza dos objetivos, esta pesquisa classifica-se como exploratória e descritiva (Sampieri, Collado & Lucio, 2013). Considera-se exploratória porque busca conhecer o contexto em que a DEAP está inserida e gerar conhecimento para a diretora da Instituição quanto aos aspectos a serem considerados e gerenciados nos Programas de Treinamento oferecidos pela DEAP. Entende-se como pesquisa descritiva por analisar as características de um fragmento da literatura e cotejar as ferramentas e aspectos (indicadores) de desempenho sugeridos pela literatura e os construídos no modelo.
Quanto à abordagem, enquadra-se como qualitativa (Sampieri, Collado & Lucio, 2013), pois, na Fase da Estruturação do modelo, se conhece o contexto da DEAP para identificar os aspectos em que o desempenho será mensurado e gerido. Na Fase da Recomendação, apresentam-se as propostas para melhoria contínua do Programa de Treinamento naqueles descritores (escalas ordinais) nos quais o Programa apresentou desempenho comprometedor, bem como a análise crítica dos artigos submetidos à análise das lentes sistêmicas e variáveis bibliométricas.
A coleta de dados será por meio de dados primários e secundários (Richardson, 1999). Referem-se a dados primários os coletados in loco por meio de entrevistas semiestruturadas com a diretora (gestora) da DEAP e com o administrador da SEA, visando à percepção dos decisores sobre as particularidades do contexto e os objetivos almejados
por ela quanto à avaliação de desempenho para, consequentemente, apoiar a gestão. No que diz respeito à análise da literatura, os dados secundários são aqueles provenientes da revisão da literatura.
Para os procedimentos técnicos, esta pesquisa se classifica como pesquisa bibliográfica (Richardson, 1999) e estudo de caso (Yin, 2015). É uma pesquisa bibliográfica em virtude de proceder à análise crítica das publicações científicas referentes ao fragmento da literatura Avaliação de Desempenho de Programas de Treinamento. É um estudo de caso ao construir um modelo de avaliação de desempenho personalizado com base na expansão de conhecimento de uma realidade específica: Programas de Treinamento oferecidos pela DEAP.
Como instrumentos de intervenção, esta pesquisa utiliza o Knowledge Development Process-Constructivist (ProKnow-C) e a metodologia Multicritério de Apoio à Decisão-Construtivista (MCDA-C), apoiados pela epistemologia Construtivista. O ProKnow-C é um processo estruturado e sistemático para seleção e revisão crítica da literatura que promove a geração de conhecimento em relação ao tema (Ensslin, Ensslin, Imlau & Chaves, 2014a; Dutra, Ripoll-Feliu, Fillol, Ensslin & Ensslin, 2015; Valmorbida et al., 2016; Thiel, Ensslin & Ensslin, 2017; Hillen, Laffin & Ensslin, 2018; Kreuzberg & Vicente, 2018). A metodologia MCDA-C tem como intuito a construção de um modelo de avaliação resultante da construção de conhecimento gerado no decisor (Ensslin, Dutra & Ensslin, 2000; Dutra, 2005; Valmorbida et al., 2016; Amaral, Ensslin, Valmorbida & Dutra, 2017; Bortoluzzi, Ensslin, Ensslin & Almeida, 2017; Longaray, Ensslin, Ensslin, Alves, Dutra & Munhoz, 2018; Matos, Valmorbida & Ensslin, 2018; Ensslin, Amaral, Valmorbida & Dutra, 2018; Martins, Ensslin & Ensslin, 2018). 2.2 PROCEDIMENTO DE SELEÇÃO DO MATERIAL QUE IRÁ COMPOR A FUNDAMENTAÇÃO TEÓRICA
Esta seção está dividida em: (i) Instrumento de Intervenção: Knowledge Development Process-Constructivist (ProKnow-C); (ii) Procedimentos para seleção do material para compor a fundamentação teórica de Avaliação de Desempenho; e (iii) Procedimentos para seleção do material para compor a fundamentação teórica de Avaliação de Desempenho e de Avaliação de Desempenho de Programas de Treinamento.
2.2.1 Instrumento de intervenção ‒ ProKnow-C
Para a seleção dos aportes teóricos relevantes para esta pesquisa, operacionalizou-se o ProKnow-C. Esse processo de mapeamento sistemático da literatura foi concebido pelos pesquisadores do Laboratório de Metodologias Multicritério de Apoio à Decisão (LabMCDA), do Departamento de Engenharia de Produção, da Universidade Federal de Santa Catarina (UFSC), a fim de subsidiar o pesquisador que não domina o arcabouço teórico a ser investigado, bem como suprir a carência de um método construtivista de seleção da literatura científica. Na comunidade acadêmica, o Proknow-C já foi operacionalizado em diversos temas (Tasca et al., 2010; Ensslin, Ensslin, Back, & Lacerda, 2013b; Ensslin, Ensslin & Pinto, 2013a; Bortoluzzi, Ensslin, Ensslin & Chaves, 2014; Valmorbida et al., 2016; Souza, Ensslin & Gasparetto, 2016; Amaral et al., 2017; Soares & Rosa, 2017; Ensslin, Ensslin, Dutra, Nunes & Reis, 2017a; Hillen, Laffin & Ensslin, 2018; Kreuzberg & Vicente, 2018).
O ProKnow-C é um processo estruturado de revisão da literatura que possibilita identificar os estudos comprovados e reconhecidos, cientificamente alinhados ao tema, segundo as percepções e delimitações do pesquisador. Também, propicia ao pesquisador detectar oportunidade de pesquisa e respaldar essa lacuna (Ensslin et al., 2014a; Dutra et al., 2015; Valmorbida et al., 2016; Thiel, Ensslin & Ensslin, 2017; Amaral, Ensslin, Valmorbida & Dutra, 2018; Hillen, Laffin & Ensslin, 2018; Kreuzberg & Vicente, 2018).
A estrutura do ProKnow-C é composta por quatro etapas: (i) Seleção de Portfólio Bibliográfico (PB); (ii) Análise Bibliométrica; (iii) Análise Sistêmica; e (iv) Formulação de Perguntas e Objetivos de Pesquisa (Ensslin, Ensslin, Imlau & Chaves, 2014a; Dutra et al., 2015; Valmorbida et al., 2016; Amaral et al., 2017; Thiel, Ensslin & Ensslin, 2017; Hillen, Laffin & Ensslin, 2018).
O ProKnow-C propõe, após as filtragens, identificar as características desse conjunto restrito da literatura e fazer uma análise crítica com base numa afiliação teórica, explorando minuciosamente o tema por parte do pesquisador (Valmorbida et al., 2016; Ensslin et al., 2018; Hillen, Laffin & Ensslin, 2018). A Figura 1 ilustra as quatro etapas do ProKnow-C.
Figura 1 - Fluxograma das etapas do Knowledge Development Process-Constructivist
Fonte: Extraído de Valmorbida et al. (2016, p. 12).
Na seção a seguir, demonstram-se os procedimentos de seleção dos Portfólios Bibliográficos (PBs) no tocante à primeira etapa do ProKnow-C.
2.2.2 Processo de Seleção do Portfólio Bibliográfico referente à Avaliação de Desempenho
O processo de seleção dos artigos foi operacionalizado na Figura 2. Estas são algumas informações desse processo:
O banco de artigos bruto, nas bases internacionais, foi operacionalizado nos dias 29 e 30 de junho de 2018.
O banco de artigos bruto, nas bases nacionais, no dia 13 de julho de 2018.
A pesquisadora optou por delimitar a área, quando possível, nas seguintes bases: (i) na SCOPUS, selecionou-se a área Business, Management, Accounting; e (ii) na Web of Science, selecionou-se a área Business e Management.
A base SPELL não permitiu busca com comando de busca, por isso a pesquisa foi feita palavra por palavra.
A Tabela 1 demonstra a quantidade de artigos exportados da base para o Excel.
Tabela 1 - Quantidade exportada por base do Portfólio Bibliográfico de Avaliação de Desempenho
Bases Exportado Excel 2010 Consulta na base
EMERALD 2000 10.137 ISI 10.108 10.108 PROQUEST 18.855 21.019 SCIELO 4.282 4.282 SCOPUS 28.894 28.894 SPELL 3.633 3.633
Figura 2 - Processo de busca do Portfólio Bibliográfico de Avaliação de Desempenho
Diante do exposto, a Tabela 2 representa os 22 artigos internacionais selecionados da Avaliação de Desempenho.
Tabela 2 - Portfólio Bibliográfico de Artigos Internacionais de Avaliação de Desempenho
Autor Ano Título Periódico
Behn 2003
Why measure performance? Different purposes require different measures
Public Administration Review
Bititci et al. 2012 Performance measurement: Challenges for tomorrow
International Journal
of Management
Reviews
Bititci et al. 2015 Value of maturity models in performance measurement
International Journal
of Production
Research
Bourne et al. 2000
Designing, implementing and
updating performance measurement systems . International Journal of Operations & Production Management Carneiro-da-Cunha, Hourneaux & Corrêa 2016
Evolution and chronology of
the organizational performance measurement field International Journal of Business Performance Management Choong 2014
Has this large number of
performance measurement
publications contributed to its better understanding? A
systematic review for
research and applications
International
Journal of
Production Research
Ferreira & Otley 2009
The design and use of
performance management
systems: An extended
framework for analysis
Management Accounting Research Franco-Santos et al. 2007 Towards a Definition of a Business Performance Measurement System International Journal of Operations and Production Management Franco-Santos, Lucianetti & Bourne 2012 Contemporary performance measurement systems: A
review of their consequences
and a framework for
research
Management Accounting Research
Ghalayini & Noble 1996 The changing basis of performance measurement International Journal of Operations and Production Management Halachmi 2005 Performance measurement is only one way of managing performance International Journal of Productivity and Performance Management Lebas 1995 Performance measurement and performance management International Journal of Production Economics Melnyk et al. 2014 Is performance measurement and
management fit for the
future?
Management Accounting Research
Micheli & Manzoni 2010
Strategic performance
measurement: Benefits,
limitations and paradoxes
Long Range
Planning
Micheli & Mari 2014 The theory and practice of performance measurement
Management Accounting Research
Neely, Gregory & Platts 1995
Performance measurement
system design - A literature review and research agenda
International Journal of Operations & Production Management Neely 1999 The performance measurement revolution:
why now and what next?
International Journal of Operations & Production Management Nudurupati et al. 2011
State of the art literature
review on performance measurement Computers & Industrial Engineering Otley 2001
Extending the boundaries of
management accounting
research: developing systems
for performance management The British Accounting Review Taticchi, Balachandran & Tonelli 2012 Performance measurement
and management systems: state of the art, guidelines for design and challenges
Measuring Business Excellence
Taticchi, Tonelli & Cagnazzo 2010
Performance measurement
and management: a
literature review and a
Measuring business excellence
research agenda
Van Camp, & Braet 2016 Taxonomizing performance measurement systems failures International Journal of Productivity and Performance Management Fonte: Elaborada pela autora.
A seguir, na Tabela 3, apresentam-se os 10 artigos nacionais de Avaliação de Desempenho.
Tabela 3 - Portfólio Bibliográfico de Artigos Nacionais de Avaliação de Desempenho
Autor Ano Título Periódico
Barbosa & Cintra 2012
Inovação, competências e desempenho organizacional - articulando construtos e sua operacionalidade Future Studies Research Journal: Trends and Strategies Brandão, Andrade & Guimarães 2012 Desempenho organizacional e suas relações com competências gerenciais, suporte organizacional e treinamento
Revista de Administração
Dutra 2005
Metodologias para avaliar o desempenho organizacional: revisão e proposta de uma abordagem multicritério Revista Contemporânea de Contabilidade Fischmann & Zilber 2000 Utilização de indicadores de desempenho para a tomada de decisões estratégicas: um sistema de controle Revista de Administração Mackenzie Gonzaga et al. 2017 Avaliação de Desempenho no Governo Mineiro: Alterações dos Indicadores e Metas
Revista de Administração Contemporânea
Nascimento et al. 2010
Ferramentas gerenciais à luz do
desempenho organizacional Revista Pretexto
Shigunov Neto & Gomes 2002
Reflexões sobre Avaliação de Desempenho: uma breve análise do sistema tradicional e das novas propostas
Revista Eletrônica de Ciência
Soares & Melo 2014 Avaliação de Desempenho Organizacional: um mapeamento em periódicos nacionais Revista Eletrônica de Estratégia & Negócios Valmorbida & Ensslin 2016 Construção de Conhecimento sobre Avaliação de Desempenho para Gestão Organizacional: uma Investigação nas Pesquisas Científicas Internacionais Revista Contemporânea de Contabilidade Valmorbida et al. 2012 Avaliação de Desempenho Organizacional: panorama das publicações em periódicos nacionais
Sociedade,
Contabilidade e Gestão
Fonte: Elaborada pela autora.
2.2.3 Processo de Seleção do Portfólio Bibliográfico referente à Avaliação de Desempenho de Programas de Treinamento
O processo de busca de revisão da literatura está ilustrado na Figura 3. Estas são algumas informações desse processo:
O banco de artigos bruto, nas bases internacionais, foi feito nos dias 27 e 30 de março de 2018.
O banco de artigos bruto, nas bases nacionais, foi feito no dia 19 de junho de 2018.
A pesquisadora optou por delimitar a área, quando possível, nas seguintes bases: (i) na Science Direct, selecionou-se a área Business, Management, Accounting; (ii) na SCOPUS, selecionou-se a área Business, Management, Accounting; e (iii) na Web of Science, selecionaram-se as áreas Business, Management e Public Administration.
A base SPELL não permitiu busca com comando de busca, por isso a pesquisa foi feita palavra por palavra, expostas no comando da SCIELO.
Para a pesquisadora, esse PB foi constituído de artigos que exclusivamente envolveram a Avaliação de Programas de Treinamento, nos quais o treinamento seria voltado para a Educação Empresarial de profissionais dentro da Organização e fornecidos por ela para, assim, articular suas competências individuais e organizacionais. Por isso, não foram selecionados cursos de graduação.
Tabela 4 - Quantidade exportada por base do Portfólio Bibliográfico de Avaliação de Programas de Treinamento
Bases Exportado Excel 2010 Consulta na base
EBSCO 22.680 22.853 EMERALD 165 165 ISI 773 23.438 PROQUEST 2.590 3.603 SCIELO 159 159 SCIENCE DIRECT 281 5.807 SCOPUS 2.014 34.514 SPELL 4.810 4.810
Figura 3 - Processo de Busca do Portfólio Bibliográfico de Avaliação de Programas de Treinamento
A seguir, apresenta-se a Tabela 5 com os artigos internacionais de Avaliação de Programas de Treinamento.
Tabela 5 - Portfólio Bibliográfico de Artigos Internacionais de Avaliação de Programas de Treinamento
Autor Ano Título Periódico
Al-Athari & Zairi 2002
Training evaluation: an
empirical study in Kuwait
Journal of European Industrial Training Alvarez, Salas
& Garofano 2004
An integrated model of training evaluation and effectiveness
Human resource
development Review
Birdi 2005
No idea? Evaluating the
effectiveness of creativity training Journal of European Industrial Training Curado & Teixeira 2014
Training evaluation levels and ROI: The case of a small logistics company European Journal of Training and Development Getha-Taylor et al. 2015
Considering the effects of time on leadership development: A
local government training
evaluation
Public Personnel
Management
Ghosh et al. 2011
Evaluating effectiveness of a training programme with trainee reaction Industrial and Commercial Training, Grohmann & Kauffeld 2013
Evaluating training programs: Development and correlates of
the questionnaire for
professional training evaluation
International Journal of Training and Development
Healy 2001 Training and public sector reform: An integrated approach
Public
Administration and
Development Honeycutt &
Stevenson 1989
Evaluating sales training
programs
Industrial Marketing Management House & Tosi 1963 An experimental evaluation of a
management-training program
Academy of
Management Journal
Huque & Vyas 2008
Expectations and performance: Assessment of public service training in Hong Kong
International Journal of Human Resource
Management
Jeschke et al. 2017
Process evaluation of a
Toolbox-training program for
construction foremen in
Denmark
Safety Science
Kirkpatrick 1979 Techniques for evaluating training-programs
Training and
Kucherov & Manokhina 2017
Evaluation of training programs
in Russian manufacturing companies European Journal of Training and Development Kuprenas, Madjidi & Alexander
1999 A project management training program
Journal of
Management in
Engineering
Lee et al. 2017
Evaluating training for new government officials: A Case study using the Success Case Method Public Personnel Management Lingham, Richley & Rezania 2006
An evaluation system for training programs: A case study using a four-phase approach
Career Development International
Lucas et al. 2017
An AHP-based evaluation
method for teacher training workshop on information and communication technology
Evaluation and
Program Planning
Mann & Robertson 1996
What should training evaluations evaluate? Journal of European Industrial Training Moffie, Calhoon & O'brien 1964 Evaluation of a management development program Personnel Psychology Muhaisen & Asour 2017
Developing and evaluating
training programs on energy efficient building design: The IUG Experience, Palestine
Journal of
Engineering
Research &
Technology
Rahim 2017
Evaluation of the effectiveness of training programmes of Islami Bank Bangladesh Limited
Journal of Business
and Retail
Management Research Sims 1993 Evaluating public-sector
training-programs
Public Personnel
Management Steensma &
Groeneveld 2010
Evaluating a training using the Four Levels Model
Journal of
Workplace Learning
Suliyanto & Setyawati 2015
Training program evaluation on
batik micro small medium
enterprises (MSMEs): An
Analytical Hierarchy Process (AHP) method
International Business Management
Tasca et al. 2010
An approach for selecting a theoretical framework for the evaluation of training programs
Journal of European Industrial Training Tennant,
Boonkrong & Roberts
2002 The design of a training programme measurement model
Journal of European industrial training
Wang & Wilcox 2006
Training Evaluation: Knowing more than is practiced
Advances in
Developing Human Resources
Fonte: Elaborada pela autora.
Posteriormente, apresenta-se a Tabela 6 com os artigos nacionais de Avaliação de Programas de Treinamento.
Tabela 6 - Portfólio Bibliográfico de Artigos Nacionais de Avaliação de Programas de Treinamento
Autor Ano Título Periódico
Camolesi & Cremonezi, 2015
Avaliação dos programas de treinamento e mapeamento de competências em uma serventia prestadora de serviços públicos com administração privada Revista Administração em Diálogo Cremonezi, Giuliani & Pizzinatto 2013
Avaliação dos programas de treinamento e mapeamento de competências no serviço público
Caderno Profissional de Administração da UNIMEP Lima & Andrade 1985 Meta-análise de avaliação de treinamento Revista de Administração Meneses & Abbad 2009
Proposta para desenvolvimento de modelos de avaliação da efetividade de programas de treinamento
RAC-Eletrônica
Mourão & Andrade 2005
Avaliação de programas públicos de treinamento: um estudo sobre o impacto no trabalho e na geração de emprego Organizações & Sociedade Mourão, Abbad & Zerbini 2014
Avaliação da efetividade e dos preditores de um treinamento a distância em uma instituição bancária de grande porte
Revista de Administração
Schröeder et al. 2005
Sistemas de treinamento corporativo virtual: definindo critérios e indicadores de avaliação Revista Eletrônica de Administração Tasca, Ensslin & Ensslin 2012 A avaliação de programas de capacitação: um estudo de caso na administração pública Revista de Administração Pública Xavier, Martins & Lima 2011
Capacitação gerencial nas incubadoras de base tecnológica: proposição de um modelo matricial de avaliação
Revista de Ciências da Administração
2.3 PROCEDIMENTO DE SELEÇÃO DO MATERIAL QUE DARÁ
SUPORTE À APRESENTAÇÃO DO INSTRUMENTO DE
INTERVENÇÃO PARA A CONSTRUÇÃO DO MODELO
CONSTRUTIVISTA
O processo de busca do Portfólio Bibliográfico (PB) que comprovará o uso da metodologia MCDA-C na ciência e verificará se há algum estudo semelhante está ilustrado na Figura 4. Apresentam-se, a seguir, algumas informações dessa busca:
O banco de artigos bruto, nas bases internacionais e nacionais, foi feito nos dias 19 e 20 de julho de 2018.
A base SPELL não permitiu busca com comando de busca, por isso a pesquisa foi feita palavra por palavra, deliberadas no comando da SCIELO.
A pesquisadora selecionou artigos que aplicaram a metodologia MCDA-C no setor público ou envolveram o processo de educação.
A Tabela 7 demonstra a quantidade baixada por base.
Tabela 7 - Quantidade exportada por base do Portfólio Bibliográfico de estudos que fizeram uso da metodologia MCDA-C
Bases Exportado Excel 2010 Consulta na base
EBSCO 4 4 EMERALD 5 5 ISI 17 17 PROQUEST 5 5 SCIELO 15 15 SCIENCE DIRECT 11 11 SCOPUS 29 29 SPELL 482 482
Figura 4 - Processo de Busca do Portfólio Bibliográfico do uso da metodologia MCDA-C
Fonte: Elaborada pela autora.
Após o processo de busca, a Tabela 8 explicita os 14 artigos selecionados que fizeram uso da metodologia MCDA-C, sendo dois internacionais e dez nacionais.
Tabela 8 - Portfólio Bibliográfico de Artigos Internacionais e Nacionais que fizeram uso da metodologia MCDA-C
Back, Ensslin & Ensslin 2012
Modelo para apoiar a gestão da alocação de pessoas com base na demanda de conhecimento Revista de Gestão e Projetos-GeP Bortoluzzi et al. 2013 Estruturação de um modelo de Avaliação de Desempenho para a gestão do curso de Ciências Contábeis, da Universidade Tecnológica Federal do Paraná
Revista de Educação e Pesquisa em Contabilidade Ensslin, Dutra & Ensslin 2000
MCDA: a constructivist approach to the management of human resources at a governmental agency International Transactions in Operational Research Ensslin et al. 2017 Avaliação Multicritério de Desempenho: o caso de um Tribunal de Justiça Cadernos Gestão Pública e Cidadania Ensslin et al. 2016
Modelo Construtivista para Apoiar o Processo de Gestão da Universidade Federal de Tocantins Revista Ibero-Americana de Estratégia Ensslin et al. 2008
Uma metodologia Multicritério (MCDA-C) para apoiar o gerenciamento do capital intelectual organizacional Revista de Administração Mackenzie Ensslin et al. 2014 A Avaliação de Desempenho como proposta para gestão das equipes do programa brasileiro Estratégia da Saúde da Família (ESF)
Revista Gerencia y Políticas de Salud
Ensslin et al. 2013
Improved decision aiding in human resource management: a case using Constructivist Multi-criteria Decision Aiding
International Journal of Productivity and Performance Management Gavazini & Dutra 2016 Avaliação Multicritério de Desempenho do servidor público: O caso do Poder Judiciário
ReCaPe- Revista de Carreiras e Pessoas Igarashi, Paladini & Ensslin 2007 A Metodologia Multicritério de Apoio à Decisão-Construtivista como subsídio para o gerenciamento interno: Estudo de caso no PPGC/UFSC
Organizações & Sociedade
