WebMonitor

Apesar de a proposta da ferramenta ser o acompanhamento do engajamento do aluno, as checagens focam mais no contexto de curso, com a verificação de recursos acessados ou visuali- zados e os dias da semana/horas em que essas ações ocorrem. Não leva em conta o desempenho e aspectos sociais dos alunos. Além disso, funciona apenas com Google Chrome e é necessário está logado no Moodle durante a utilização da ferramenta.

3.4

WebMonitor

A ferramenta WebMonitor [75] é um plugin desenvolvido para o AVA Moodle para acom- panhar o envio de tarefas obrigatórias e as interações dos alunos nos fóruns, utilizando como indicadores o número de arquivos postados em atividades e a quantidade de interações em fóruns ou a ausência dessas. O plugin funciona dentro da hierarquia de curso do Moodle, como um bloco. Ao ser inicializada, a ferramenta faz uma varredura no AVA para identificar todas as atividades de entrega obrigatória. Para exibir a informação visual, são usados gráficos do tipo donutse círculos com cores variando do vermelho ao verde para classificar os alunos conforme a sua situação acadêmica.

As funcionalidades do sistema são as seguintes: opção de filtrar por grupos; exibição do percentual de estudantes por nível de participação nas tarefas obrigatórias com os níveis Muito baixo (0-25%), Baixo (26-50%), Bom (51-75%) e Excelente (76-100%); gráfico sensível ao clique, sendo possível enviar mensagem ao grupo de estudantes selecionado; nível de partici- pação por aluno, exibindo a quantidade de interações de cada aluno com os módulos de ati- vidades e o resumo da participação do estudante na entrega das tarefas; as tarefas entregues são demarcadas na cor verde, as não entregues, mas que estão dentro do prazo, ficam na cor cinza e as que não foram entregues e estão com o prazo vencido, são marcadas na cor vermelha; possibilidade de envio de mensagens individuais por meio do próprio módulo de mensagens do Moodle. Na Figura 3.4 é exibida a interface gráfica do plugin.

O plugin foi considerado como limitado para analisar o risco de evasão do aluno, pois se baseia apenas no envio de tarefas e na participação nos fóruns. Alunos podem enviar tarefas, mas não tirar boas notas ou podem interagir nos fóruns e não fazer as atividades. Além do mais, o sistema classifica alunos que enviam atividades e interagem nos fóruns na cor verde, que significa excelente, mesmo quando estes estão sem acessar a disciplina há vários dias, além de não possuir filtros por período.

3.4 WebMonitor 43

Figura 3.4: Interface do Webmonitor

A Tabela 3.1 apresenta um quadro-resumo com todas essas ferramentas supracitadas, sinte- tizando os indicadores utilizados, as visualizações e as funcionalidades com as observações da pesquisadora sobre as limitações encontradas nessas ferramentas.

3.4 WebMonitor 44

Tabela 3.1: Tabela comparativa das ferramentas de Learning Analytics

Ferramenta Indicadores

utilizados Gráficos Funcionalidades Tipo Observações da Pesquisadora

Analytics Graphs Atividades e recursos visualizados; atividades e recursos não visualizados; submissões de tarefas; dias acessados por aluno,

semanalmente.

Linhas e barras

Seleção de grupo de alunos; verificar tarefas e materiais acessados ou não por determinado aluno; verificar a proporção e o nome das tarefas enviadas por um aluno; enviar mensagens. Bloco Não permite a visualização de um panorama mais direto e consolidado da turma, pois não possui relatórios consolidados, sendo necessário buscar informações das turmas em 6 telas diferentes.

Loop

Número de visualizações de páginas por dia da semana; número de páginas únicas visualizadas; número de estudantes por página; número de sessões; duração média da sessão; número de páginas visualizadas por sessão; páginas mais acessadas na semana. Linhas, pizzas e histogramas Verificação do número de páginas visualizadas ao longo do andamento do curso, exibindo o início e o fim de atividades indicadas pelo professor como evento crítico de aprendizagem; histogramas sobre a quantidade de páginas acessadas por estudantes; filtros por data.

Aplicação Web

A ferramenta está muito voltada para o contexto de curso, com o indicador principal sendo a visualização de páginas (sejam elas de conteúdos ou atividades) e duração de sessões. Faltam indicadores sociais e cognitivos. Moodle Analytics Dashboard MAD Número de participantes; número de páginas únicas visualizadas; atividades únicas; tempo médio de sessão; número de sessões; taxa de rejeição (percentual de sessões de uma página em comparação com outras páginas acessadas). Linhas, dispersão, barras, pizzas e mapa de calor Verificação do número de páginas e atividades acessadas e dos dias acessados e da taxa de rejeição por aluno; apresentação das atividades por hora, mapa de calor das atividades por dia da semana e hora; verificação do total de páginas visualizadas por dia e do tempo médio da sessão e da taxa de rejeição por papel (estudante/professor); envio de mensagem privada.

Extensão para navegador Apesar de a proposta da ferramenta ser o monitoramento do aluno, as verificações focam mais no contexto de curso, com a verificação de recursos acessados ou visualizados e os dias da semana/horas

em que essas ações ocorrem. Faltam indicadores cognitivos e sociais.

WebMonitor

Envio de tarefas ou ausência de envio de tarefas obrigatórias; interações nos fóruns de discussão. Retângulos aninhados (Treemaps) e gráfico do tipo donuts

Selecionar o grupo de aluno; enviar mensagens individuais ou em grupo; resumo da participação do estudante na entrega de tarefas; marcação de alunos através de indicadores de acordo com o nível de participação de cada estudante.

Bloco

Os indicadores envio de atividades obrigatórias e interações não são suficientes, pois não permitem verificar o resultado do aluno. Alunos que enviam todas as atividades, podem tirar notas abaixo da média.

Fonte: A Autora

Concluímos, sobre os trabalhos relacionados que foram analisados, que essas ferramentas de Learning Analytics são incompletas quanto à necessidade de uma análise conjunta de indi- cadores cognitivos, sociais e comportamentais dos alunos. Ora apresentam apenas indicadores comportamentais, ora apenas indicadores sociais e comportamentais, ora apenas indicadores sociais e cognitivos. Também não simplificam a visualização dos dados dos alunos para os profissionais que atuam na EAD ao agruparem muitas funcionalidades, requerendo novamente que os professores, tutores e gestores analisem muitas janelas para obter informações signifi- cativas sobre a situação dos alunos no AVA [13]. Nessa pesquisa, propusemos uma ferramenta

3.4 WebMonitor 45

de Learning Analytics que preenche essas lacunas apresentadas, ao utilizar indicadores sociais, cognitivos e comportamentais dos estudantes, com a exibição de relatórios gráficos consoli- dados, referentes à turma como um todo e também ao aluno, individualmente. A ferramenta também exibe uma listagem com possíveis alunos em risco de evasão. No Capítulo 4, apresen- tamos a ferramenta Relatório de Risco de Evasão, desenvolvida para o AVA Moodle.

Capítulo 4

PLUGIN

RELATÓRIO DE

RISCO DE

EVASÃO

Nessa pesquisa, é proposta uma ferramenta de Learning Analytics que lança mão de técnicas de visualização de dados para exibir dados do engajamento dos estudantes, que contemplem indicadores cognitivos, sociais e comportamentais dos alunos, com o objetivo de auxiliar pro- fessores, tutores e gestores de curso a identificar estudantes em risco de evasão no AVA Moodle. Além dessas funcionalidades, o sistema permitirá a seleção de filtros e ainda a notificação dos alunos identificados como em risco de evasão, por meio do envio de mensagens pelo AVA. Neste capítulo, apresentaremos detalhes sobre a concepção, análise e desenvolvimento desse sistema, que batizamos de Relatório de Risco de Evasão. Iniciaremos abordando a definição dos indicadores que serão utilizados pelo sistema. Em seguida, descrevemos a modelagem do sistema, sua arquitetura, sua interface e suas funcionalidades.