Como pode ser observado na Figura 8, o processo de construção do modelo de avaliação de desempenho da Logística Reversa proposto dividiu-se em cinco fases distintas, descritas a seguir.
FIGURA 8 - Fases de construção do modelo de avaliação de desempenho da Logística Reversa
Fonte: Elaborada pela autora.
Caracterização do setor de Lâmpadas
Caracterização do SLR de Lâmpadas
Técnica Delphi FASE I
Logística Logística Reversa (LR) Avaliação de Desempenho
Dimensões do TBL e indicadores para avaliação de desempenho do SLR Avaliação de Desempenho da LR
Dimensões do TBL e indicadores para avaliação do SLR
Particularidades do setor de lâmpadas (Manual e acordo setorial)
Modelo preliminar para avaliação de desempenho do SLR de lâmpadas (dimensões/indicadores/competências/modo de medição)
Escolha o grau de importância dos indicadores propostos
Sugestões de alteração dos indicadores propostos (indicador/competências/ modo de medição)
Sugestões de novos indicadores (indicador/competências/ modo de medição)
Reavaliação dos indicadores em relação ao grau de importância, considerando os indicadores incluídos e alterados na 1ª etapa
Identificação e seleção dos especialistas (pesquisadores/gestores)
Confirmação final do grau de importância dos indicadores mantidos após a 2ª etapa e a justificativa dos casos de designação igual a 3 ou inferior 1ª Etapa 2ª Etapa 3ª Etapa MODELO FINAL FASE II FASE III FASE V FASE IV Dimensões/indicadores/competências/modo de medição
Fase I: Levantamento das Dimensões do TBL e indicadores para avaliação de
desempenho do SLR
A fase I, de levantamento das dimensões e indicadores para avaliação de
desempenho da LR, foi iniciada com a busca por trabalhos acadêmicos que tratassem de
Logística, Logística Reversa, Desempenho e Avaliação de Desempenho. A busca foi realizada em artigos de revisão de literatura, teses e dissertações para identificar as lacunas e tendências existentes na literatura referentes aos termos citados anteriormente, especialmente em LR e avaliação de seu desempenho.
Foram criados procedimentos de busca para identificar os artigos mais relevantes que tratassem sobre avaliação de desempenho e em seguida avaliação de desempenho da logística reversa, por meio do portal CAPES nos bancos de dados da Science Direct, Web of Science, Scopus, Wiley Online Library, Elsevier e Emerald sem limitação de período. As buscas envolveram dois temas principais em título e assunto: ―reverse logistics‖ e ―performance measurement‖ e outros termos que pudessem ser considerados sinônimos, como ―green logistics‖ e ―performance evaluation‖.
Primeiramente foram separados os trabalhos que apresentavam modelos de avaliação, excluídos os trabalhos repetidos e em seguida foram investigados os diversos modelos/frameworks de avaliação de desempenho da LR. Os diversos termos foram combinados e percebeu-se que o uso do BSC se destacou como ferramenta de avaliação de desempenho de forma geral, como também na avaliação de desempenho da LR. Diante da importância do BSC para a avaliação de desempenho, os termos ―balanced scorecard‖ e ―BSC‖ passaram a ser combinados com os termos reverse logistics/green logistics e performance measurement/performance evaluation. Os artigos encontrados foram separados, após a leitura dos resumos para verificar o alinhamento da pesquisa quanto aos temas. Os artigos resultantes após a verificação que não apresentavam modelos de avaliação de desempenho para LR foram separados para revisão de literatura.
Diante dos resultados obtidos, foi possível observar a importância de desenvolver estudos que avaliassem coerentemente o desempenho da atividade de logística reversa no contexto da sustentabilidade, abordando as dimensões social, ambiental e econômica, estreitamente relacionadas ao conceito da LR. Observou-se a existência de poucos trabalhos empenhados em avaliar o desempenho da LR, sobretudo em setores com logística reversa obrigatória. Os estudos encontrados que trataram sobre a avaliação de desempenho da LR compreendiam diversas dimensões, em visões cada vez mais abrangentes.
Diante dessa questão, verificou-se ainda a existência de uma lacuna na literatura em relação a estudos que abordassem a avaliação de desempenho da LR no contexto da sustentabilidade que percebessem que para avaliar a logística reversa seria necessário avaliar o sistema como um todo, avaliando conjuntamente o desempenho dos participantes do canal reverso. Neste sentido, a revisão de literatura passou a ter como foco os modelos de avaliação de desempenho do Sistema de Logística Reversa (SLR) que utilizaram como base o tripé da sustentabilidade e seus respectivos indicadores. A Fase I teve como resultado uma relação de indicadores que possibilitassem avaliar o desempenho do SLR nas dimensões social, ambiental e econômica com base na revisão de literatura sobre a LR e os aspectos da sustentabilidade e também com base nos indicadores encontrados nos modelos de avaliação de desempenho nas três dimensões abordadas neste estudo.
Fase II: Particularidades do setor de lâmpadas mercuriais
Identificada a lacuna na literatura em relação a estudos que abordassem a avaliação de desempenho do SLR no contexto da sustentabilidade, partiu-se então para a fase II, que tratou sobre a caracterização do setor, em especial do setor de lâmpadas fluorescentes de vapor
de sódio e mercúrio e de luz mista. A escolha do setor foi determinada em função do
conteúdo das informações setoriais obtidas após a realização de um minucioso levantamento documental sobre todos os setores com LR obrigatória prevista em lei. A disponibilização de informações sobre a estrutura do setor e funcionamento da LR foram fatores cruciais para a determinação do setor de lâmpadas fluorescentes de vapor de sódio e mercúrio e de luz mista como objeto de estudo.
Como o objetivo de aprofundar o conhecimento em torno das peculiaridades do referido setor realizou-se o levantamento documental na legislação que instituiu a Política Nacional de Resíduos Sólidos (lei 12.305/2010), que trata sobre a obrigatoriedade da realização da LR de lâmpadas mercuriais, bem como no Acordo Setorial assinado por empresas fabricantes e importadoras de lâmpadas.
Por meio das informações contidas no Manual de Diretrizes Operacionais para implantação e operação do Sistema de Logística Reversa foi possível realizar a
caracterização do SLR de lâmpadas. Com base no levantamento documental realizado no
referido manual foram observadas detalhadamente as competências de cada um dos participantes do SLR de lâmpadas fluorescentes mercuriais: importadores/fabricantes,
geradores domiciliares, empresas de transporte, empresas recicladoras, aterros, entidades gestoras, geradores não domiciliares, distribuidores e comerciantes de lâmpadas e governo.
Fase III: Modelo preliminar para avaliação de desempenho do SLR de lâmpadas
Na fase III, com base no levantamento bibliográfico e documental (manual e acordo setorial), foram determinados os indicadores para compor o modelo preliminar de
avaliação de desempenho do SLR de lâmpadas. Para tanto, os indicadores de desempenho
encontrados na literatura nas três dimensões em estudo foram relacionados às particularidades do setor de lâmpadas, tendo como base as competências de cada participante do canal reverso. Em seguida, para cada indicador de desempenho do SLR foram formuladas as métricas, ou seja, de que forma tais indicadores deveriam ser medidos e em seguida deverão ser estabelecidas as diferentes formas de avaliação de desempenho. Conforme Sellitto et al (2010, p.98) ―a avaliação apreende mais aspectos do que a medição, pois o julgamento pode integrar diversos requisitos de desempenho em uma única categoria [péssimo, ruim, médio, bom, ótimo]‖ enquanto que a medição ―apreende apenas o conteúdo do indicador físico, abrindo mão de visões alternativas sobre o problema, porém é mais objetiva‖.
Neste sentido, o modelo preliminar resultante desta fase foi composto pela três dimensões (social, ambiental e econômica), 43 indicadores, sendo 12 indicadores para a dimensão social, 20 indicadores para a dimensão ambiental e 11 indicadores para a dimensão econômica e ainda as respectivas competências e modo de medição de cada um deles.
Neste modelo, conforme a literatura e características do setor, estão os indicadores que deveriam ser determinantes para se obter o melhor desempenho possível do SLR de lâmpadas nas três dimensões abordadas neste estudo.
Fase IV: Técnica Delphi
Na fase IV o modelo preliminar para avaliação de desempenho do SLR de
lâmpadas resultante da fase III foi apresentado aos especialistas por meio da técnica Delphi com o objetivo de obter o consenso de opiniões do grupo sobre quais indicadores e
modos de medição considerariam importantes para o setor em estudo, por meio de uma série de questionários.
Planejou-se inicialmente realizar a técnica Delphi em três etapas. Para dar início a técnica Delphi foi necessário realizar previamente a identificação e seleção dos especialistas
(pesquisadores e gestores). Nas três etapas da técnica Delphi os especialistas poderiam atribuir o grau de importância para cada indicador por meio da escala Likert, definida em cinco níveis: 5 – Muito Importante 4 – Importante 3 – Desejável 2 – Não Prioritário 1 – Dispensável
Na primeira etapa seria feita a escolha do grau de importância dos indicadores propostos e também poderiam ser sugeridas alterações nos indicadores propostos, bem como em suas competências e modos de medição. Da mesma forma, também poderiam ser recomendados novos indicadores, competências e modos de medição que não haviam sido sugeridos no modelo preliminar. Na segunda etapa da técnica Delphi seria feita uma reavaliação dos indicadores em relação ao grau de importância, considerando os indicadores incluídos e alterados pelos especialistas na primeira etapa. Na terceira etapa seria realizada a confirmação final do grau de importância dos indicadores mantidos após a segunda etapa e seria necessário que os especialistas justificassem os casos de designação igual a 3 (desejável) ou inferior (não prioritário e dispensável).
Na proposta inicial de aplicação da técnica Delphi, após a realização das três etapas seria obtido o modelo final para avaliação de desempenho do SLR de lâmpadas mercuriais, sendo composto por indicadores, competências e modos de medição. Os indicadores que obtivessem o consenso do grupo, conforme o nível de consenso estabelecido pelo pesquisador, fariam parte do modelo final.
O nível de consenso desejado para compor o modelo final de avaliação de desempenho do SLR foi previamente determinado, sendo obtido pela soma das respostas das escalas ―muito importante‖ e ―importante‖. Apenas os indicadores que apresentaram percentual cumulativo em valor igual ou superior a 50% foram escolhidos para fazer parte do modelo final.
Fase V: Modelo final
O modelo final para avaliação de desempenho do SLR de lâmpadas mercuriais
foi estabelecido após a exclusão dos indicadores que apresentaram o nível de consenso
viabilização de indicadores é a definição de forma clara do que vai ser medido, como será medido e o que se espera das medidas a serem geradas pelos indicadores. Logo, partindo desta percepção, o presente modelo compreende não apenas uma lista final de indicadores
para cada uma das dimensões tratadas neste estudo, mas determina as competências de cada participante do SLR de lâmpadas, os modos de medição e ainda traz a definição dos critérios de classificação para a avaliação do desempenho. Neste sentido, elaborou-se
o Quadro 8, que foi formulado a partir dos trabalhos de Joung et. al (2012); Rodrigues et. al. (2015) e Fernandes (2016) no intuito de apresentar a estrutura do modelo final para avaliação de desempenho do SLR de lâmpadas utilizado neste estudo.
QUADRO 8 - Estrutura do modelo final para avaliação de desempenho do SLR de lâmpadas mercuriais
ID Nome Descrição Competência(s)
Modo de medição (Unidade) Escala de atendimento Critério/Nota Identificação alfanumérica única de um indicador. Dependendo da dimensão do indicador irá apresentar a letra ―S‖ para Social, ―A‖ para Ambiental e ―E‖ para Econômico mais um número Palavra (s) para a designaçã o distintiva de um indicador Declaração explicitando as características essenciais e funções de um indicador
Dentre os diversos participantes do SLR, a quem compete o indicador: Importadores/Fabricante (I/F) Geradores Domiciliares (GD) Empresas de Transporte (T) Empresas Recicladoras (R) Aterros (A)
Entidade Gestora (EG)
Gerador não Domiciliar (GND) Distribuidores e Comerciantes (D/C) Governo (G) Como podem ser mensurados os indicadores e em quais unidades estes podem ser descritos Melhor situação, ou seja, indicador plenamente atendido 5 Situação mediana, cujo indicador é parcialment e atendido 3 Pior situação, que indica um indicador pouco ou não atendido 0
Fonte: Adaptado de Joung et. al (2012); Rodrigues et. al. (2015) e Fernandes (2016)
O modelo final para avaliação de desempenho do SLR de lâmpadas mercuriais apresenta três colunas que têm como objetivo identificar e descrever o indicador (identificação alfanumérica, nome, descrição), uma coluna que apresenta o modo de medição para cada um deles, uma coluna para as competências e ainda uma coluna com escalas de atendimento de critérios e respectivas notas que servirão para identificar o posicionamento do SLR em relação a cada indicador. Os critérios foram criados com base nos estudos de Joung et. al (2012), Rodrigues et. al. (2015) e Fernandes (2016), que de acordo com as
características de cada indicador, selecionaram uma escala variando entre zero (indicador pouco ou não atendido), três (indicador parcialmente atendido) e cinco (indicador plenamente atendido). Após a avaliação individual de cada indicador, para obter a classificação de desempenho do SLR por dimensão e geral, este estudo tomou como base o trabalho de Rodrigues et. al. (2015). Para tanto, a nota geral deve ser obtida a partir do somatório das notas alcançadas por cada indicador, devendo-se calcular o percentual de atendimento com relação a nota máxima possível de cada aspecto avaliado. Para obter a avaliação de desempenho do SLR de Lâmpadas (por dimensão e global) o percentual obtido deve ser classificado de acordo com a Tabela 3.
TABELA 3 - Critérios de classificação e avaliação de desempenho do SLR de Lâmpadas
Grau de Atendimento Nível de Desempenho 85% – 100% Desempenho ótimo.
68% – 84% Desempenho bom.
51% – 67% Desempenho regular.
até 50% Desempenho ruim. Fonte: Adaptado de Rodrigues et. al. (2015).