Análise de Dados da Avaliação I

(1)

In te rf ac e s P e ss o a M áq u in a Análise de Dados da Avaliação I

14

(2)

(3)

(4)

Resumo da Aula Anterior

Avaliação com utilizadores

Planeamento

Participantes

Ética; Quem; Quantos; Divisão

Tarefas e Medidas

Fases da sessão de testes

Preparação; Introdução; Avaliação; Balanço

(5)

Perguntas

Quantos utilizadores queremos num avaliação formativa?

Quando não devo usar um protocolo de voz alta?

(6)

Sumário Análise Estatística Estatística Descritiva Média Desvio-padrão Mediana Moda Quartis

(7)

01

ANÁLISE

ESTATÍSTICA

(8)

(9)

O que (NÃO) vem aí

(10)

(11)

Amostragem

População

(12)

Fazemos os testes…

(13)

Variáveis

Independentes

(14)

Variáveis

(15)

Variáveis

(16)

Escalas de Medida

Nominal

Ordinal

(17)

Escalas de Medida

Nominal

Cor, marca, nome

Ordinal

(18)

Escalas de Medida

Nominal

Cor, marca, nome

Ordinal

[leve, médio, pesado] [satisfeito, neutro, insatisfeito]

(19)

Escalas de Medida

Nominal

Cor, marca, nome

Ordinal

[leve, médio, pesado] [satisfeito, neutro, insatisfeito]

Contínua

(20)

02

ESTATÍSTICA

DESCRITIVA

(21)

As Bases – Estatística Descritiva

Média

Soma dos quadrados das diferenças Variância Desvio-Padrão n x x =

∑

i

∑

− = 2 ) (x x SQ _i 1 2 − = n SQ s 2 s s =

(22)

Significado do Desvio Padrão Média = 50 StDev = 16 Média = 50 StDev = 4.2 20 30 40 50 60 70 80 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 20 30 40 50 60 70 80 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 σ σ σ σ

(23)

(24)

Mediana

(25)

Mediana

9, 4, 15, 2, 8, 1, 1, 4, 2, 2, 12, 3, 2, 1, 9

(26)

Mediana

9, 4, 15, 2, 8, 1, 1, 4, 2, 2, 12, 3, 2, 1, 9

(27)

Mediana vs. Média

9, 4, 15, 2, 8, 1, 1, 4, 2, 2, 12, 3, 2, 1, 9

1, 1, 1, 2, 2, 2, 2, 3, 4, 4, 8, 9, 9, 12, 15

(28)

Mediana vs. Média

9, 4, 15, 2, 8, 1, 1, 4, 2, 2, 12, 3, 2, 1, 9

1, 1, 1, 2, 2, 2, 2, 3, 4, 4, 8, 9, 9, 12, 15

(29)

Quartis

Deixam 25%, 50%, 75% dos valores antes de sí

(30)

Quartis

(31)

Quartis

(32)

Quartis

(33)

Moda

1, 1, 1, 2, 2, 2, 2, 3, 4, 4, 8, 9, 9, 12, 15

(34)

Moda

1, 1, 1, 2, 2, 2, 2, 3, 4, 4, 8, 9, 9, 12, 15

= 2

(35)

O Quê Quando? Variáveis Nominais: moda

“Quantos preferem A, B ou C”

Variáveis Ordinais: mediana, moda, quartis

“Nível de satisfação, de 1 a 5”

Variáveis Contínuas: média, d.padrão, mediana, quartis

(36)

No Excel… AVERAGE(range) VAR(range) STDEV(range) MEDIAN(range) MODE(range) QUARTILE(range,quart)

(37)

(38)

Exemplo – Aplicação para gerir música

Duas opções para escolher música:

Menus Atalhos

(39)

Tempos medidos em testes com utilizadores…

Com menus: (2.2, 5.5, 6.4, 3.4, 5.6, 4.5, 3.4, 2.3, 3.4, 5.4, 2.3, 4.5, 3.4, 2.2, 5.4, 6.3, 2.1, 3.2, 5.4, 3.2) Com atalhos: (2.5, 3.1, 4.4, 5.4, 3.2, 3.6, 1.1, 4.4, 3.2, 5.4, 3.5, 3.4, 5.4, 2.6, 2.8, 1.2, 4.1, 6.5, 4.3, 3.8)

(40)

(41)

Var. Contínua

(42)

Tempos medidos em testes com utilizadores…

Com menus: Média: 4.0 Desvio Padrão: 1.46 Com atalhos: Média: 3.69 Desvio Padrão: 1.36

(43)

Parece que…

Menus pior que atalhos!

(44)

Como explicar estes

valores?

(45)

O que explica estes valores?

Com menus: Média: 4.0 Mediana: 3.4 Com atalhos: Média: 3.69 Mediana: 3.55

(46)

O que explica estes valores?

Com menus: Média: 4.0 Mediana: 3.4 Com atalhos: Média: 3.69 Mediana: 3.55

Valores afastados – desequilíbrio!

(47)

Boxplot 0 1 2 3 4 5 6 7 Menus Atalhos

(48)

Boxplot 0 1 2 3 4 5 6 7 Menus Atalhos Max Min Mediana Q3 Q1

(49)

(50)

Não Chega!

(51)

INFERÊNCIA

ESTATÍSTICA

(52)

Testes Estatísticos

Solução A melhor que a B?

Alteração no tipo de menus (PullDown vs Pie) Caligráfico vs Menus

Solução cumpre os objectivos?

(53)

Para quê este trabalho todo…

Questão: a tarefa leva menos do que 30 segundos?

(54)

Testes com 10 utilizadores:

(55)

29.6 < 30

(56)

29.6 < 30

(57)

Problema 1: Grande dispersão!

Média: 29.6 StDev: 8.7

(58)

Para quê este trabalho todo… Média: 29.6 StDev: 8.7 0 5 10 15 20 25 30 35 40 45 50

(59)

Para quê este trabalho todo… Média: 29.6 StDev: 8.7 0 5 10 15 20 25 30 35 40

(60)

(61)

Problema 2: Amostra pequena!

0 5 10 15 20 25 30 35 40

(62)

(63)

(64)

Mas mesmo assim não chega!

0 5 10 15 20 25 30 35 40

(65)

(66)

(67)

(68)

Acreditamos na média?

(69)

Acreditamos na média?

É melhor olhar para os dados…

Mas… Só temos uma amostra!

(70)

Universo vs Amostra

Média, desvio padrão do universo

vs. Da amostra…

σ

µ

,

s

x,

(71)

Há sempre mais um…

(72)

Resumo

Estatística descritiva

Dá visão global da amostra,

mas não prevê comportamento da população

Solução: inferência estatística

(73)

Quatro testes diferentes…

t-student para médias

intervalos de confiança

qui-quadrado

(74)

Resumo

Análise Estatística

Amostra vs População

Variáveis (dependentes e independentes) Escalas de medida

Estatística Descritiva

Média; Desvio-padrão Mediana; Moda; Quartis

(75)

TPC – Análise Dados

Ler Cap. 11 do Livro