1- Correlao Ponto Bisserial

Para avaliar a validade dos itens recorreu-se a correlao ponto bisserial.

Primeiramente verificou-se a correlao Item-Total e, em seguida, a correlao Item-Item
de acordo com os nveis.
1.1 Correlao Item-Total
Inicialmente verificou-se a correlao entre os itens e o total de acertos.
Tabela 1: Correlao Item-Total
Itens
Argu1
Detal2
Macro3
Macro4
Infer5
Macro6
Argu7
Macro8
Infer9
Infer10
Detal11
Macro12
Argu13
Detal14
Infer15
Detal16
Infer17

Total de
acertos
r()
p
0.355
0.000
0.198
0.000
0.497
0.000
0.598
0.000
0.182
0.001
0.432
0.000
0.545
0.000
0.578
0.000
0.239
0.000
0.088
0.122
0.504
0.000
0.437
0.000
0.611
0.000
0.365
0.000
0.270
0.000
0.383
0.000
0.380
0.000

Observa-se que o nico item que no apresenta correlao significativa com o total o
item Infer10 (r = 0.088 ; p = 0.122).
Os demais itens apresentaram correlaes significativas positivas variando de 0.182 a
0.611.
Os itens que apresentaram as correlaes mais baixas (< 0.300) foram: Detal2, Infer5,
Infer9 e Infer15.
Os demais itens apresentaram correlaes acima de 0.300.
1.1 Correlao Item-Item
Nas tabelas a seguir podem ser observados os coeficientes de correlao entre os itens que
compem cada nvel.
Tabela 2: Correlao entre os itens do nvel Argumentao
Argu1
r()
p
Argu1
Argu7
Argu13

0.126
0.162

0.026
0.004

Argu7
r()
p
0.126 0.026
0.274

Argu13
r()
p
0.162 0.004
0.274 0.000

0.000

Todas as correlaes foram significativas e positivas variando de 0.126 a 0.274.

Tabela 3: Correlao entre os itens do nvel Detalhes

Detal2
r()
p
Detal2
Detal11
Detal14
Detal16

-0.012
0.076
0.099

Detal11
r()
p
-0.012 0.833

0.833
0.181
0.080

0.392
0.213

Detal14
r()
p
0.076 0.181
0.392 0.000

0.000
0.000

0.135

Detal16
r()
p
0.099 0.080
0.213 0.000
0.135 0.017

0.017

No foram significativas as correlaes entre o item Detal2 e os demais itens.

As demais correlaes foram significativas e positivas com coeficientes variando de 0.135
a 0.392.
Tabela 4: Correlao entre os itens do nvel Macroestrutura
Macro3

r()
Macro3
Macro4
Macro6
Macro8
Macro12

0.243
0.273
0.280
0.224

0.000
0.000
0.000
0.000

Macro4

Macro6

Macro8

Macro12

r()

r()

r()

r()

0.243

0.000

0.273
0.292

0.000
0.000

0.292
0.335
0.191

0.000
0.000
0.001

0.280
0.335
0.170

0.000
0.000
0.003

0.170
0.110

0.003
0.052

0.224
0.191
0.110
0.285

0.000
0.001
0.052
0.000

0.285

0.000

Observa-se que o nico par de itens que no apresenta correlao significativa par
Macro6 e Macro12 (r= 0.110 ; p = 0.052).
Os demais itens apresentaram correlaes significativas positivas variando de 0.170 a
0.335.
Tabela 5: Correlao entre os itens do nvel Inferncia
Infer5

r()
Infer5
Infer9
Infer10
Infer15
Infer17

0.087
0.025
-0.096
0.040

Infer9

p
0.126
0.655
0.089
0.481

Infer10

Infer15

Infer17

r()

r()

r()

r()

0.087

0.126

0.025
0.014

0.655
0.807

0.014
0.047
0.130

0.807
0.413
0.022

-0.096
0.047
-0.050

0.089
0.413
0.375

-0.050
0.113

0.375
0.045

0.040
0.130
0.113
0.018

0.481
0.022
0.045
0.745

0.018

0.745

Os pares que apresentaram correlao positiva significativa foram Infer17 com os itens
Infer9 (r= 0.130 ; p = 0.022) e Infer10 (r = 0.113 ; p = 0.045).
Os demais itens no apresentaram correlaes significativas.
2 Comparao dos nveis do instrumento
Verificou-se a mdia do percentual de acertos para comparar os nveis.
Tabela 6: estatsticas referentes ao percentual de Acerto nos nveis.
Mdia
Mediana
Desvio Padro

Argu
46.58
33.33
33.21

Detal
56.97
50.00
22.09

Macro
62.18
60.00
28.61

Infer
40.06
40.00
18.18

Pode-se observar que o maior nmero de acertos (em termos de mdia percentual) ocorrem
nas perguntas referentes a Macroestrutura (62,18%), seguida de Detalhes (56,97%),
Argumentao (46,58%) e Inferncia (40,06%).
MACROESTRUTURA > DETALHES > ARGUMENTAO > INFERNCIA
Em seguida realizou-se o teste de Anlise de Varincia de Friedman ou teste de Friedman,
tambm conhecida como Dupla Anlise de Varincia por Postos no intuito de comparar o
desempenho nos nveis (macroestrutura, argumentao, inferncias, e detalhes) e verificar
se as diferenas eram significativas.
Soma dos Ranks
Mdia dos Ranks
X2 de Friedman

Graus de liberdade
p
Comparaes:
Argu e Detal
Argu e Macro
Argu e Infer
Detal e Macro
Detal e Infer
Macro e Infer

1- Argu
691.00
2.21
140.86
3
0.000
Diferena
180.50
256.50
81.00
76.00
261.50
337.50

2- Detal
871.50
2.79

3- Macro
947.50
3.04

4- Infer
610.00
1.95

p
< 0.05
< 0.05
No significativo
No significativo
< 0.05
< 0.05

A Anlise de Varincia de Friedman s no revelou diferenas significativas entre os nveis

Argumentao e Inferncia; Detalhes e Macroestrutura.

3 Comparao na varivel gnero

Para comparao dos gneros utilizou-se o teste no paramtrico U de Mann-Whitney. Este
teste compara medianas de amostras independentes e anlogo ao teste t, sendo que no se
usam os valores das observaes, mas sim o posto de cada uma, ou seja, o nmero de
ordem que lhe corresponde.
Nvel
Argumentao
Detalhes
Macroestrutura
Inferncia
Total

GENERO
Masculino
Feminino
Masculino
Feminino
Masculino
Feminino
Masculino
Feminino
Masculino
Feminino

N
104
208
104
208
104
208
104
208
104
208

Mdia
(%)
46.79
46.47
58.17
56.37
66.15
60.19
39.81
40.19
53.11
50.99

Posto
Mdio
157.23
156.13
158.79
155.36
169.80
149.85
154.43
157.53
163.04
153.23

Soma de
Postos
16352.00
32476.00
16514.00
32314.00
17659.50
31168.50
16061.00
32767.00
16956.50
31871.50

10740.00

0.916

10578.00

0.732

9432.50

0.060

10601.00

0.761

10135.50

0.362

No foram encontradas diferenas significativas nas comparaes realizadas.

4 Comparao na varivel instituio
Para comparao das instituies utilizou-se o teste no paramtrico U de Mann-Whitney.
Este teste compara medianas de amostras independentes e anlogo ao teste t, sendo que
no se usam os valores das observaes, mas sim o posto de cada uma, ou seja, o nmero
de ordem que lhe corresponde.
Nvel
Argumentao
Detalhes
Macroestrutura
Inferncia
Total

INSTITUIO
Pblica
Privada
Pblica
Privada
Pblica
Privada
Pblica
Privada
Pblica
Privada

N
277
35
277
35
277
35
277
35
277
35

Mdia
(%)
47.29
40.95
57.85
50.00
62.67
58.29
40.29
38.29
52.24
47.39

Posto
Mdio
158.31
142.19
159.36
133.89
158.35
141.83
157.62
147.60
159.25
134.70

Soma de
Postos
43851.50
4976.50
44142.00
4686.00
43864.00
4964.00
43662.00
5166.00
44113.50
4714.50

4346.50

0.300

4056.00

0.089

4334.00

0.297

4536.00

0.510

4084.50

0.127

No foram encontradas diferenas significativas nas comparaes realizadas.

5 Comparao na varivel idade

Para comparao das faixas etrias utilizou-se o teste no paramtrico de Kruskal-Wallis.
Este teste equivalente a ANOVA.

Nvel
Argumentao

Detalhes

Macroestrutura

Inferncia

Total

IDADE
de 17 a 21 anos
de 22 a 27 anos
de 28 anos em diante
de 17 a 21 anos
de 22 a 27 anos
de 28 anos em diante
de 17 a 21 anos
de 22 a 27 anos
de 28 anos em diante
de 17 a 21 anos
de 22 a 27 anos
de 28 anos em diante
de 17 a 21 anos
de 22 a 27 anos
de 28 anos em diante

N
199
63
50
199
63
50
199
63
50
199
63
50
199
63
50

Mdia
(%)
48.91
42.86
42.00
57.91
54.37
56.50
62.81
63.49
58.00
39.30
41.59
41.20
52.29
51.26
49.88

Posto
Mdio
162.42
146.87
145.07
159.17
147.44
157.31
158.87
158.39
144.69
152.95
165.56
159.20
160.23
150.21
149.57

2.576

0. 276

0.947

0. 623

1.065

0. 587

1.118

0. 572

0.953

0. 621

No foram encontradas diferenas significativas nas comparaes realizadas.

6 Comparao na varivel classe social

Para comparao das classes sociais utilizou-se o teste no paramtrico de Kruskal-Wallis.
Este teste equivalente a ANOVA.
Nvel
Argumentao

Detalhes

Macroestrutura

Inferncia

Total

CLASSE SOCIAL
Baixa
Mdia
Alta
Baixa
Mdia
Alta
Baixa
Mdia
Alta
Baixa
Mdia
Alta
Baixa
Mdia
Alta

N
60
237
14
60
237
14
60
237
14
60
237
14
60
237
14

Mdia
(%)
43.89
47.26
47.62
49.58
58.65
58.93
54.67
63.46
70.00
33.67
40.84
54.29
45.39
52.82
58.82

Posto
Mdio
148.66
157.69
158.79
130.59
162.35
157.46
132.80
160.62
177.14
127.83
158.65
231.86
127.23
161.38
188.14

0.539

0. 764

6.950

0. 031

5.622

0. 060

18.166

0.000

8.876

0. 012

No foram encontradas diferenas significativas nas comparaes realizadas nos nveis

Argumentao (H = 0.539 ; p = 0.764) e Macroestrutura (H = 5.622 ; p = 0.060).
Nos demais nveis as diferenas foram significativas.
Para identificar nesses nveis, quais as classes sociais cujas diferenas foram significativas
utilizou-se o teste U de Mann-Whitney.

Nveis
Detalhes
Inferncia
Total

Comparaes:
Baixa e Mdia
Baixa e Alta
Mdia e Alta
Baixa e Mdia
Baixa e Alta
Mdia e Alta
Baixa e Mdia
Baixa e Alta
Mdia e Alta

Diferena (U)
5660.00
345.50
1605.00
5678.00
162.00
855.00
5549.50
254.50
1374.50

p
0.008
0.276
0.824
0.010
0.000
0.001
0.008
0.021
0.278

No nvel Detalhes foi significativa a comparao entre a classe Baixa e Mdia, com a
classe mdia obtendo maior percentual de acertos (U = 5660.00 ; p = 0.008).
No Nvel Inferncia foram significativas todas as comparaes, com a classe Baixa
obtendo menor percentual de acertos do que a classe Mdia e Alta, e a classe Mdia
obtendo menor percentual de acertos do que a classe Alta.
No Total foram significativas as comparaes entre a classe Baixa e Mdia e entre a classe
Baixa e Alta, sempre com a classe Baixa obtendo menor percentual de acertos do que as
demais.
7 Comparao na varivel rea do curso
Para comparao da rea do curso utilizou-se o teste no paramtrico de Kruskal-Wallis.
Este teste equivalente a ANOVA.
Nvel
Argumentao

Detalhes

Macroestrutura

Inferncia

Total

AREA

Humanas
Sade
Exatas
Biolgicas
Humanas
Sade
Exatas
Biolgicas
Humanas
Sade
Exatas
Biolgicas
Humanas
Sade
Exatas
Biolgicas
Humanas
Sade
Exatas
Biolgicas

176
27
102
7
176
27
102
7
176
27
102
7
176
27
102
7
176
27
102
7

Mdia
(%)
44.51
49.38
50.98
23.81
55.40
56.48
60.05
53.57
58.75
74.07
66.47
40.00
40.11
46.67
38.82
31.43
49.97
57.52
54.09
37.82

Posto
Mdio
150.88
164.00
168.18
98.79
152.66
149.46
165.49
149.14
145.92
191.61
170.09
88.93
156.72
187.41
151.07
111.00
147.78
183.76
168.84
90.86

5.896

0. 117

1.795

0. 616

13.292

0. 004

6.026

0.110

9.833

0. 020

No foram encontradas diferenas significativas nas comparaes realizadas nos nveis

Argumentao (H = 5.896 ; p = 0.117), Detalhes (H = 1.795 ; p = 0.616) e Inferncia (H =
6.026 ; p = 0.110).
Nos demais nveis as diferenas foram significativas (Macroestrutura e Total).
Para identificar nesses nveis, quais as reas cujas diferenas foram significativas utilizouse o teste U de Mann-Whitney.

Nveis
Macroestrutur
a

Comparaes:
Humanas e Sade
Humanas e Exatas
Humanas e Biolgicas
Sade e Exatas
Sade e Biolgicas
Exatas e Biolgicas
Humanas e Sade
Humanas e Exatas
Humanas e Biolgicas
Sade e Exatas
Sade e Biolgicas
Exatas e Biolgicas

Total

Diferena (U)

1667.50

0.011

7599.500
392.500
1205.000
27.000
175.000
1826.50
7766.000
391.500
1249.000
36.000
180.500

0.030
0.098
0.306
0.003
0.021
0.052
0.060
0.101
0.456
0.012
0.028

No nvel Macroestrutura foi significativa a comparao entre Humanas e Sade, e

Humanas e Exatas, com a rea de Humanas obtendo menor percentual de acertos. Foi
significativa, tambm, a comparao entre Biolgicas e Sade, e Biolgicas e Exatas, com
a rea de Biolgicas obtendo menor percentual de acertos
No Total foram significativas as comparaes entre Biolgicas e Sade, e Biolgicas e
Exatas, com a rea de Biolgicas obtendo menor percentual de acertos.

8 Comparao na varivel perodo do curso

Para comparao do perodo do curso utilizou-se o teste no paramtrico de KruskalWallis. Este teste equivalente a ANOVA.
Nvel
Argumentao

Detalhes

Macroestrutura

Inferncia

Periodo

1 e 2 Perodo
3 e 4 Perodo
5 e 6 Perodo
do 7 em diante
1 e 2 Perodo
3 e 4 Perodo
5 e 6 Perodo
do 7 em diante
1 e 2 Perodo
3 e 4 Perodo
5 e 6 Perodo
do 7 em diante
1 e 2 Perodo

69
131
50
62
69
131
50
62
69
131
50
62
69

Mdia
(%)
46.86
49.11
50.00
38.17
61.23
57.06
57.00
52.02
62.32
65.04
60.80
57.10
40.29

Posto
Mdio
157.11
163.45
164.67
134.56
169.70
158.14
154.66
139.84
157.36
165.69
151.53
140.13
157.36

5.262

.154

4.255

.235

3.710

.295

2.524

.471

Total

3 e 4 Perodo
5 e 6 Perodo
do 7 em diante
1 e 2 Perodo
3 e 4 Perodo
5 e 6 Perodo
do 7 em diante

131
50
62
69
131
50
62

40.46
42.80
36.77
52.86
53.12
52.71
46.58

158.62
167.00
142.60
161.36
165.36
160.53
129.11

7.360

.061

No foram encontradas diferenas significativas nas comparaes realizadas.