Para atingir os objetivos propostos na pesquisa foram desenvolvidas as atividades a seguir.
4.2.1 Construção do referencial teórico e elaboração da matriz de indicadores de sustentabilidade específicos para coleta seletiva de RSU
A revisão da literatura foi estruturada para se buscar o aprofundamento conceitual sobre coleta seletiva, sustentabilidade e indicadores. Foram consultados artigos científicos, periódicos, dissertações, teses, legislações e livros. Nesta etapa foram identificados os indicadores de sustentabilidade mais utilizados pela coleta seletiva no País, bem como por instituições e entidades de referência que trabalham com o tema.
Proposta da matriz de ISCS Consulta aos especialistas para avaliação e
validação externa do conjunto de ISCS Pré-teste
Construção do referencial teórico e elaboração da matriz de indicadores de sustentabilidade específicos para coleta
seletiva de RSU.
Aplicação da matriz de ISCS para a cidade de Salvador-BA
Os indicadores foram ordenados de acordo com dimensões da sustentabilidade, partindo-se para a organização da matriz preliminar. Na matriz é apresentada a forma de apuração de cada indicador e identificadas as tendências à sustentabilidade para cada indicador.
Assim, a estrutura da matriz preliminar de indicadores de sustentabilidade para a coleta seletiva pode ser observada no Quadro 24.
Quadro 24 - Estrutura da matriz preliminar de indicadores de sustentabilidade de
coleta seletiva
Fonte: Dados de pesquisa
4.2.2 Consulta aos especialistas para avaliação e validação externa do conjunto de Indicadores de Sustentabilidade de Coleta Seletiva (ISCS)
Para avaliar a adequação do questionário Delphi foi realizado um pré- teste para verificar se sua estrutura apresentava clareza, validade e operatividade (MARCONI; LAKATOS, 2011). Para o envio dos questionários foi utilizada a plataforma online Survs®, escolhida por proporcionar praticidade e rapidez à pesquisa, uma vez que, os painelistas recebem um link que quando acessados são direcionados ao questionário de pesquisa. A ferramenta também possibilita o acompanhamento em tempo real da participação dos painelistas. No pré-teste o questionário Delphi foi enviado a 18 painelistas, mestrandos do MAASA. O resultado do pré-teste foi satisfatório. Os respondentes (12 painelistas) não declararam qualquer dificuldade ao responder, a operatividade do sistema Survs® foi considerada satisfatória e o tempo de resposta foi entre 5 e 15 minutos.
FORMA DE APURAÇÃO TENDÊNCIA À
SUSTENTABILIDADE NOTA
tendência 01 tendência 02 tendência 03
INDICADORES E DIMENSÕES DA SUSTENTABILIDADE
Ind.01 descrição do indicador
D IM E N S Ã O
4.2.2.1 Escolha dos painelistas
Foram considerados especialistas os profissionais que atuam na área acadêmica, no planejamento e gestão de resíduos sólidos urbanos e na operação das atividades relacionadas a coleta seletiva. “...quando falamos aqui de especialistas, não estamos nos referindo necessariamente a títulos” (MINAYO, 2009, p.88). Essa interação de experiências acumuladas pode colaborar com a definição dos ISCS. Para Skulmoski et al. (2007), os participantes do Delphi devem atender aos requisitos de conhecimento e experiência, capacidade e vontade de participar do Delphi.
A chave para um estudo Delphi de sucesso reside na seleção dos participantes, uma vez que os resultados dependem do conhecimento e cooperação dos painelistas (GORDON, 1994).
A seleção foi realizada por meio de busca na Plataforma Lattes, consulta a entidades de planejamento e gestão de resíduos sólidos urbanos e cooperativas de reciclagem e indicação de pesquisadores. A quantidade de especialistas pode variar. Segundo Wright e Giovinazzo (2000) e Skulmoski et
al. (2007), as rodadas podem ser iniciadas com um mínimo de três painelistas.
O painel inicial foi composto por 50 especialistas distribuídos conforme mostrado no Quadro 25.
Quadro 25 – Perfil dos especialistas do painel inicial Delphi
Entidades Profissionais
Academia e pesquisa mestres e doutores
Prestadores de serviço:
- autarquias municipais engenheiros e planejadores
Ministério do Meio Ambiente engenheiros e consultores
Cooperativas de reciclagem coordenadores
Fonte: Elaborado pela autora.
4.2.2.2 Definição do Nível de Consenso (NC)
Após uma breve revisão da literatura, Santiago (2011) mostrou que os níveis de consenso podem variar entre 50 e 80%. Para Scarparo et al. (2012) o
nível de consenso é tarefa reservada ao pesquisador e não há uma regra pré- determinada para estabelecê-lo.
Para essa pesquisa, na 1ª rodada de aplicação do Delphi foi utilizada a distribuição de frequência absoluta de respostas, ou seja, a tendência que obtiver uma frequência de resposta (f) igual ou superior a 50% (NC≥50) será validada. Nos casos em que este parâmetro não foi atingido foi realizada uma nova rodada.
Na 2ª rodada, quando a tendência não atingiu o NC proposto, foi considerada a pontuação com maior frequência dentre todas as outras, para então, o consenso final ser determinado.
4.2.2.3 Procedimento das rodadas de aplicação do método Delphi
Após o pré-teste e seleção dos painelistas, foi iniciada a primeira rodada da pesquisa. Foi enviado por e-mail um convite (Apêndice A) aos painelistas que continha o link de acesso ao questionário na plataforma eletrônica Survs ®. Durante o preenchimento do questionário, o painelista pontuava as tendências à sustentabilidade para cada indicador, além de contribuir com sugestões e críticas em espaço destinado. Cada tendência foi avaliada pelo painelista com a atribuição de notas na escala de 1 a 5, ou seja, quanto maior a nota maior será a sustentabilidade do indicador. Considerou-se que cada dimensão deve ter igual importância para a sustentabilidade da coleta seletiva, não sendo, portanto, atribuídos pesos a elas. No questionário os indicadores estão organizados em dimensões, conforme Figura 5.
Figura 5 -Fragmento do questionário na plataforma Survs enviado aos painelistas na 1ª rodada, indicando a dimensão, o indicador (Ind.01), sua forma de apuração e a escala de pontuação às tendências
A primeira rodada procurou estabelecer o primeiro consenso de opiniões acerca dos indicadores de sustentabilidade de coleta seletiva e levantar sugestões para a melhoria do questionário. Após o término da rodada, os resultados foram analisados para verificar o nível de consenso dos painelistas. Aqueles indicadores que não alcançaram o nível de consenso proposto (NC≥50%), juntamente com algumas sugestões feitas pelos painelistas, prosseguiram para mais uma rodada da pesquisa.
A segunda rodada teve como objetivo o feedback da 1ª rodada para os painelistas e a busca do consenso final. O consenso final também utilizou o NC proposto, que quando não atingido foi considerada a pontuação com maior frequência dentre todas.
4.2.3 Validação interna: aplicação da matriz de ISCS
Validada a matriz de ISCS pelos painelistas, partiu-se para a etapa de validação interna para verificar se a mesma é de fácil aplicação.
A matriz foi aplicada no município de Salvador de forma direta com profissionais da Assessoria de Planejamento da Limpurb (ASPLA/Limpurb) e representantes do Complexo Cooperativo de Reciclagem da Bahia (CCRB), além de análises de dados secundários do serviço público municipal de limpeza urbana e manejo de resíduos sólidos, Secretaria Municipal da Fazenda e dados do Sistema Nacional de Informações sobre Saneamento (SNIS) ano base 2011.