Análise de Dados da Avaliação I

(1)

Inte rf ac es Pe ssoa Má qu in a Análise de Dados da Avaliação I

14

Cap. 11 – Análise dos Dados de Avaliação

(2)

(3)

(4)

Resumo da Aula Anterior Avaliação com u:lizadores Planeamento Par:cipantes É@ca; Quem; Quantos; Divisão Tarefas e Medidas Fases da sessão de testes Preparação; Introdução; Avaliação; Balanço Métodos de avaliação

(5)

Perguntas Quantos u:lizadores queremos num avaliação forma:va? Quando não devo usar um protocolo de voz alta?

(6)

Sumário Análise EstaDs:ca EstaDs:ca Descri:va Média Desvio-padrão Mediana Moda Quar@s

(7)

01

ANÁLISE

ESTATÍSTICA

(8)

(9)

O que (NÃO) vem aí

(10)

(11)

Amostragem

População

(12)

Fazemos os testes…

(13)

Variáveis Independentes Dependentes

(14)

Variáveis

O número de erros varia com a idade?

(15)

Variáveis

O número de erros varia com a idade?

(16)

Escalas de Medida Nominal Ordinal ConDnua

(17)

Escalas de Medida Nominal Cor, marca, nome Ordinal ConDnua

(18)

Escalas de Medida Nominal Cor, marca, nome Ordinal [leve, médio, pesado] [sa@sfeito, neutro, insa@sfeito] ConDnua

(19)

Escalas de Medida Nominal Cor, marca, nome Ordinal [leve, médio, pesado] [sa@sfeito, neutro, insa@sfeito] ConDnua Idade, altura, peso, tempo, erros

(20)

02

ESTATÍSTICA

DESCRITIVA

(21)

As Bases – Estaas@ca Descri@va Média Soma dos quadrados das diferenças Variância Desvio-Padrão n x x ₌

∑

i

∑

− = (x x)2 SQ _i 1 2 − = n SQ s 2 s s =

(22)

Signiﬁcado do Desvio Padrão Média = 50 StDev = 16 Média = 50 StDev = 4.2 20 30 40 50 60 70 80 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 20 30 40 50 60 70 80 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 σ σ σ σ

(23)

(24)

Mediana

(25)

Mediana

9, 4, 15, 2, 8, 1, 1, 4, 2, 2, 12, 3, 2, 1, 9

(26)

Mediana

9, 4, 15, 2, 8, 1, 1, 4, 2, 2, 12, 3, 2, 1, 9

(27)

Mediana vs. Média 9, 4, 15, 2, 8, 1, 1, 4, 2, 2, 12, 3, 2, 1, 9 1, 1, 1, 2, 2, 2, 2, 3, 4, 4, 8, 9, 9, 12, 15 Média = 5

(28)

Mediana vs. Média 9, 4, 15, 2, 8, 1, 1, 4, 2, 2, 12, 3, 2, 1, 9 1, 1, 1, 2, 2, 2, 2, 3, 4, 4, 8, 9, 9, 12, 15 Média = 5 ß valores invulgarmente altos

(29)

Quar@s Deixam 25%, 50%, 75% dos valores antes de sí 1, 1, 1, 2, 2, 2, 2, 3, 4, 4, 8, 9, 9, 12, 15

(30)

(31)

(32)

(33)

Moda

1, 1, 1, 2, 2, 2, 2, 3, 4, 4, 8, 9, 9, 12, 15

(34)

Moda 1, 1, 1, 2, 2, 2, 2, 3, 4, 4, 8, 9, 9, 12, 15 = 2 34

(35)

O Quê Quando?

Variáveis Nominais: moda

“Quantos preferem A, B ou C”

Variáveis Ordinais: mediana, moda, quar:s

“Nível de sa@sfação, de 1 a 5”

Variáveis ConDnuas: média, d.padrão, mediana, quar:s

(36)

No Excel… AVERAGE(range) VAR(range) STDEV(range) MEDIAN(range) MODE(range) QUARTILE(range,quart)

(37)

(38)

Exemplo – Aplicação para gerir música Duas opções para escolher música: Menus Atalhos Qual a melhor?

(39)

Exemplo – Aplicação para gerir música Tempos medidos em testes com u:lizadores… Com menus: (2.2, 5.5, 6.4, 3.4, 5.6, 4.5, 3.4, 2.3, 3.4, 5.4, 2.3, 4.5, 3.4, 2.2, 5.4, 6.3, 2.1, 3.2, 5.4, 3.2) Com atalhos: (2.5, 3.1, 4.4, 5.4, 3.2, 3.6, 1.1, 4.4, 3.2, 5.4, 3.5, 3.4, 5.4, 2.6, 2.8, 1.2, 4.1, 6.5, 4.3, 3.8)

(40)

Exemplo – Aplicação para gerir música

(41)

Var. ConDnua â

(42)

Exemplo – Aplicação para gerir música Tempos medidos em testes com u:lizadores… Com menus: Média: 4.0 Desvio Padrão: 1.46 Com atalhos: Média: 3.69 Desvio Padrão: 1.36

(43)

Exemplo – Aplicação para gerir música Parece que…

Menus pior que atalhos!

4.0 > 3.69

(44)

Como explicar estes

valores?

(45)

Exemplo – Aplicação para gerir música O que explica estes valores? Com menus: Média: 4.0 Mediana: 3.4 Com atalhos: Média: 3.69 Mediana: 3.55

(46)

Exemplo – Aplicação para gerir música O que explica estes valores? Com menus: Média: 4.0 Mediana: 3.4 Com atalhos: Média: 3.69 Mediana: 3.55 Valores afastados – desequilíbrio! Valores próximos – ok!

(47)

Boxplot 0 1 2 3 4 5 6 7 Menus Atalhos

(48)

Boxplot 0 1 2 3 4 5 6 7 Menus Atalhos Max Min Mediana Q3 Q1

(49)

(50)

Não Chega!

(51)

INFERÊNCIA

ESTATÍSTICA

(52)

Testes Estaas@cos Solução A melhor que a B? Alteração no @po de menus (PullDown vs Pie) Caligráﬁco vs Menus Solução cumpre os objec:vos? Os nossos critérios de usabilidade são a@ngidos?

(53)

Para quê este trabalho todo…

Questão: a tarefa leva menos do que 30 segundos?

(54)

Testes com 10 u:lizadores:

(55)

29.6 < 30

(56)

29.6 < 30

(57)

Problema 1: Grande dispersão!

Média: 29.6 StDev: 8.7

(58)

Para quê este trabalho todo… Média: 29.6 StDev: 8.7 0 5 10 15 20 25 30 35 40 45 50

(59)

Para quê este trabalho todo… Média: 29.6 StDev: 8.7 0 5 10 15 20 25 30 35 40

(60)

(61)

(62)

Para quê este trabalho todo… Problema 2: Amostra pequena! 0 5 10 15 20 25 30 35 40

(63)

(64)

(65)

Para quê este trabalho todo… Mas mesmo assim não chega! 0 5 10 15 20 25 30 35 40

(66)

(67)

(68)

Acreditamos na média?

(69)

Acreditamos na média?

(70)

Acreditamos na média?

É melhor olhar para os dados…

Mas… Só temos uma amostra!

(71)

Universo vs Amostra Média, desvio padrão do universo vs. Da amostra…

σ

µ

,

s

x,

(72)

Há sempre mais um…

(73)

Resumo EstaDs:ca descri:va Dá visão global da amostra, mas não prevê comportamento da população Solução: inferência estaDs:ca Essencial: escolher método apropriado

(74)

Quatro testes diferentes… t-student para médias intervalos de conﬁança qui-quadrado Coeﬁciente de correlação r de Pearson

(75)

Resumo Análise EstaDs:ca Amostra vs População Variáveis (dependentes e independentes) Escalas de medida EstaDs:ca Descri:va Média; Desvio-padrão Mediana; Moda; Quar@s Não Chega !

(76)

TPC – Análise Dados

Ler Cap. 11 do Livro