Programa ULISSES: desenvolvimento de ambientes de aprendizagem e avaliação de impactos

(1)

1 Programa ULISSES:

Desenvolvimento de ambientes de aprendizagem e avaliação de impactos

Programa ULISSES:

desenvolvimento de ambientes de

aprendizagem e avaliação de impactos

César Ferreira | Álvaro Fernandes | Leonor Gaspar Pinto | Paulo Silva

Setembro | 2009

Programa ULISSES:

Desenvolvimento de ambientes de aprendizagem e avaliação de

Programa ULISSES

Â Trata-se de um Programa experimental que tem como objectivo principal a educação e a formação informal dos utilizadores da Rede Municipal de Bibliotecas de Lisboa;

Â Valorizar as Bibliotecas Municipais de Lisboa como espaços de aprendizagem e pontos privilegiados de acesso à informação; Â Desenvolver as competências dos utilizadores em literacia da

informação, de forma a potenciar a sua capacidade de aceder, avaliar e utilizar a informação disponível em diferentes suportes; Â Contribuir para a generalização da formação básica em

Tecnologias de Informação e Comunicação dos utilizadores das bibliotecas e dos munícipes em geral.

(2)

Avaliar Avaliar Aceder

Aceder Utilizar_Utilizar IFLA

IFLA--Directrizes sobre a Literacia de InformaDirectrizes sobre a Literacia de Informaçção para a Aprendizagem ão para a Aprendizagem ao Longo da Vida

ao Longo da Vida, 2006, 2006

Consiste no desenvolvimento de competências em Literacia da Informação com os utilizadores através de:

Â Programa Anual de Sessões de Aprendizagem gratuitas nas mais diversas áreas;

Â Sessões com a duração média de 3H;

Â Decorrem com uma regularidade média semanal; Â Envolve 11 Bibliotecas Municipais.

(3)

Como fazer uma folha de c Como fazer uma folha de cáálculolculo Como preparar uma apresenta Como preparar uma apresentaççãoão Como processar um texto

Como processar um texto Utiliza

Utilizaçção ão éética de informatica de informaççãoão Utiliza

Utilizaçção e ão e produ produçção de ão de

Informa Informaççãoão

Cidadania on Cidadania on--lineline Di

Diáário da Reprio da Repúública Electrblica Electróónico (DRE)nico (DRE) Informar para a

Informar para a Cidadania Cidadania

Pesquisar no cat

Pesquisar no catáálogo da RMBLlogo da RMBL Explorar fontes de informa

Explorar fontes de informaçção na ão na RMBLRMBL

Visitas Guiadas II:

Visitas Guiadas II: ÀÀDescoberta dos Descoberta dos Recursos da RMBL Recursos da RMBL À Àdescoberta da descoberta da Rede Municipal Rede Municipal de Bibliotecas de de Bibliotecas de Lisboa Lisboa Internet Segura Internet Segura

Como criar uma conta de correio Como criar uma conta de correio electr

electróóniconico Viajar pela WEB Viajar pela WEB Aprender a Aprender a Navegar Navegar Visitas Guiadas I: Visitas Guiadas I: À

ÀDescoberta da BibliotecaDescoberta da Biblioteca Inicia

Iniciaçção ão ààs Tecnologias de Informas Tecnologias de Informaçção e ão e Comunica

Comunicaçção I e IIão I e II Preparar a Preparar a viagem para o viagem para o Mar da Mar da Informa Informaççãoão

M Móódulosdulos Á Áreas de reas de Aprendizagem Aprendizagem Programa ULISSES:

Com os seguintes resultados 2008:

52 ÂNº de Computadores envolvidos

27 ÂNº de Técnicos Envolvidos no Programa

226 ÂNº Total de Horas de Aprendizagem

103 ÂTotal de Sessões de Aprendizagem

257 ÂParticipantes que frequentaram 2 ou mais Sessões

524 ÂTotal de Participantes Ano

11 ÂNº Bibliotecas envolvidas

• Os conteúdos foram adquiridos - Média 2 Por 50% participantes

Em 8 dos 13 Módulos Conteúdos – Média 3

Desempenho dos Monitores - Média 4 Avaliação geral (escala de 0 a 4)

(4)

Matriz de Impacto

Seleccione e caracterize os servi

Seleccione e caracterize os serviçços/actividades a ser avaliadosos/actividades a ser avaliados

Construa a

Construa a “

“Est

Estó

ória

ria”

”

Defina as necessidades, inputs, resultados, efeitos e

impactos desses servi

impactos desses serviçços/actividades.os/actividades.

Seleccione Indicadores SMART

Decida quais são os indicadores

Decida quais são os indicadores SMARTSMART((SSimples de imples de implementar,

implementar, MMensurensurááveis, focalizados na veis, focalizados na AAccçção, ão,

R

Relevantes, adequados ao elevantes, adequados ao TTempo disponempo disponíível)vel)

Escolher os m

étodos de Recolha de dados

é

todos de Recolha de dados

Decidia como e quando vão ser recolhidos os dados

para esses indicadores. Recomenda

para esses indicadores. Recomenda--se a utilizase a utilizaçção de ão de registos de participantes / visitantes, observa

registos de participantes / visitantes, observaçções, ões,

registo de sugestões/coment

registo de sugestões/comentáários, questionrios, questionáários breves rios breves

e grupos de foco. e grupos de foco.

E

I

R

ETAPA 1 ETAPA 1 ETAPA 2 ETAPA 2 ETAPA 3 ETAPA 3

Estrutura de Avalia

ç

ão de Impactos

Analisar os dados

Uma vez recolhidos os dados, questione

Uma vez recolhidos os dados, questione--se sobre os se sobre os seguintes aspectos: o que dizem os dados sobre a

seguintes aspectos: o que dizem os dados sobre a ““EstEstóóriaria””? ? As evidências indicam que os objectivos do

As evidências indicam que os objectivos do

servi

serviçço/actividade foram alcano/actividade foram alcanççados? Os dados revelam ados? Os dados revelam alguma tendência ou padrão?

alguma tendência ou padrão?

Apresentar e usar os resultados

Associe os resultados

Associe os resultados àà““EstEstóóriaria””original. Dê sentido aos original. Dê sentido aos

resultados e apresente

resultados e apresente--os os ààs partes interessadas.s partes interessadas. Utilize os resultados para melhorar o que faz e conquistar

Utilize os resultados para melhorar o que faz e conquistar

apoios para os seus servi

apoios para os seus serviçços/actividadesos/actividades

A

Metodologia: E I R A A

ETAPA 4 ETAPA 4 ETAPA 5 ETAPA 5

Estrutura de Avalia

(5)

O quê?

Â

Sessões de

aprendizagem

gratuitas

Â

Iniciação às TIC I

Â

Adultos e Séniores

Matriz de Impacto

Â

Necessário porque…

Â

Conjunto de utilizadores que

frequentava a biblioteca que

pretendia usar o computador e

não tinha competências para

tal;

Â

Potenciar as tecnologias da

informação junto de um

segmento de público situação

infoexclusão.

Matriz de Impacto

Caracteriza

Caracterizaçção os servião os serviçços/actividades a ser avaliadosos/actividades a ser avaliados

ETAPA 1

Construa a “

Construa a

“Est

Estó

ória

ria”

”

Â

Recursos

- Computadores com acesso à Internet; Salas multimédia;

- Técnicos com experiência anterior na animação e

desenvolvimento das sessões e conteúdos e com

possibilidade e divulgar práticas e transferir competências

restantes Bibliotecas e profissionais da rede;

Â

Conhecimento dos referenciais das TIC e Literacia.

Â

Actividades previstas

- Sessões de aprendizagem de iniciação às TIC calendarizadas

Semanalmente;

- Sessões complementares de reforço da aprendizagem

calendarizadas consoante as necessidades dos participantes.

(6)

Onde e Quando?

Â

5 Bibliotecas

Â

Pelo menos 10 Sessões

Â

Pelo menos 50 participantes

Â

Período de Fevereiro a Dezembro de 2008

ETAPA 1

Construa a “

Construa a

“Est

Estó

ória

ria”

”

ETAPA 2

Seleccione Indicadores SMART

Indicador

Resultados e

efeitos definidos

Mé

M

étodo de Recolha

todo de Recolha

Nº de participantes

que atingiram o nível

2, de uma escala de

1 (min) a 3 (max.),

do referencial de

cada módulo

Ficha de

avaliação

específica

Encadeamento para cada tipo de

Efeito Global de Aprendizagem EGA :

Projecta-se que, pelo

menos metade, dos

participantes

possam compreender

os conteúdos da

sessão/s

Conhecimento e Compreensão

Efeitos Esperados (

(7)

Efeitos Esperados

((OutcomesOutcomes))

Nº de participantes que atingiram o nível 2, de uma escala de 1 a 3,do referencial de cada módulo Projecta-se que pelo

menos metade dos participantes possam adquirir metade das competências a

desenvolver nas sessões

ETAPA 2

Seleccione Indicadores SMART

Indicador

Resultados e

efeitos definidos

Mé

M

étodo de Recolha

todo de Recolha

Ficha de avaliação específica

Aquisi

Aquisiç

ç

ão de Competências:

Atitudes e Valores

Projecta-se que os participantes apontem resultados de satisfação na frequência da sessão de aprendizagem acima da média.

Efeitos Esperados

ETAPA 2

Seleccione Indicadores SMART

Indicador

Resultados e

efeitos definidos

Nº de participantes que_{atingiram pelo menos 3,}

Mé

M

étodo de Recolha

todo de Recolha

Numa escala de 0 a 4, em cada um dos seguintes Aspectos :

- Avaliação do Programa (conteúdos):

- Avaliação dos Recursos Materiais e Humanos; - Desempenho dos Monitores;

- Auto-Avaliação dos Participantes.

Ficha de Avaliação Geral

(8)

Actividades, comportamentos e Progressão

Projecta-se que todos os participantes

do Painel identifiquem alterações significativas nas suas rotinas, hábitos e valores, por terem frequentado as

sessões de aprendizagem

Efeitos Esperados

ETAPA 2

Seleccione Indicadores SMART

Indicador

Resultados e

efeitos definidos

Nº de participantes que

Mé

M

étodo de Recolha

todo de Recolha

assinalaram, pelo menos, 2

factos, de uma lista dada (questionário), em cada um dos 2 níveis definidos. A saber: - Objectivos pessoais e profissionais alcançados - Mudanças de

comportamentos e atitudes na utilização das TIC e da informação no dia a dia

Guião de Entrevista/ Questionário

Foto

M

é

todos de recolha

Â

Guião Entrevista

Â

Mapas de Monitorização

Â

Fichas de Inscrição

Â

Fichas de Avaliação Geral

Â

Fichas de Avaliação Específica

ETAPA 3

(9)

5 bibliotecas envolvidas

5 bibliotecas envolvidas (David Mourão-Ferreira; Camões;

Central; Orlando Ribeiro; Olivais ) 70 participantes envolvidos

70 participantes envolvidos

15 sessões realizadas

15 sessões realizadas Envolver 5 bibliotecas

Envolver pelo menos 50 participantes

Realizar pelo menos 10 sessões

Produto obtido

Produto esperado

Quadro Comparativo

ETAPA 4

Analisar os dados

90% atingiram o n

90% atingiram o níível 3 de aquisivel 3 de aquisiçção de competênciasão de competências

O que quer dizer que entenderam todos os itens, embora ainda

considerem ser necess

considerem ser necessáário mais prrio mais prááticatica

Resultado:

Conhecimento e Compreensão

Resultados por Efeitos Gerais de Aprendizagem

ETAPA 4

Analisar os dados

66% atingiram o nível 2 de aquisição de competências

O que quer dizer que adquiriram todas as competências propostas,

embora ainda tenham algumas d

embora ainda tenham algumas dúúvidas, ou seja, têm as vidas, ou seja, têm as competências mas necessitam de ser mais consolidadas

competências mas necessitam de ser mais consolidadas

Resultado:

(10)

ETAPA 4

Analisar os dados

Resultados por Efeitos Gerais de Aprendizagem

% participantes que apontaram o Nível 3 BOM (Escala 0 a 4) nos seguintes aspectos:

- 64,1% – Programa: que envolve Conteúdos, Duração da Sessão; Cumprimento de Objectivos;

- 87,2% – Avaliação de Recursos: que envolve Instalações e

Equipamentos;

- 94,9% – Desempenho do Monitor ao nível de: Conhecimentos; Capacidade Dinamização Grupo; Transmissão de Conhecimentos;

- 41% – Auto-Avaliação do Participante ao nível de: Aquisição de Competências; Participação na Sessão.

Os resultados apontam para bons níveis de desempenho e para o alcançar das metas. O último dado revela a, ainda, baixa confiança dos participantes nas competências recém-adquiridas e a necessidade de reforçar o que aconteceu nas sessões complementares.

Resultado:

Atitudes e Valores

:

ETAPA 4

Analisar os dados

Resultados por Efeitos Gerais de Aprendizagem

De um Painel de 7 entrevistados a quem se aplicou uma lista de alterações de rotinas, hábitos ou estilos de vida, podemos apontar: A)

5 Compraram computador; 5 Instalaram ligação à Internet;

2 Consideram ter maiores oportunidades de emprego e/ou ocupação complementar.

B)

7 Utilizam os computadores com maior frequência e com maior à-vontade; 7 Continuaram a Aprendizagem.

Estes resultados apontam factos que poderão traduzir-se,

a curto prazo (3 anos), em impactos desta experiência.

Resultado:

(11)

Testemunhos

_{“Agora já consigo enviar e receber} e-mails. Há dias, no aniversário do neto, já lhe consegui enviar um

e-mail com uma imagem inserida, tipo postal.”

“Agora até comprei um portátil para mim” “Nunca se sabe se, no futuro, não poderá vir a dar “jeito” para me poder candidatar a um “part-time” que complemente a reforma “