Planejamento de

Experimentos:
Primeiras idias, importncia e impacto
Cristiano Ferraz, PhD
Departamento de Estatstica - UFPE
Email: cferraz@de.ufpe.br
Primeiras idias...
O grande objetivo de toda cincia
cobrir o maior nmero possvel de
fatos empricos por deduo lgica,
partir do menor nmero possvel de
hipteses ou axiomas...
Einstein
Primeiras idias:
aprendendo atravs da
experimentao
Muito do que sabemos hoje devemos ao
aprendizado atravs de experimentos
Vejamos, por exemplo, os primeiros
passos dados para elucidar o que hoje
se conhece bem como FOTOSSNTESE
Dois experimentos: um do sculo XVII e
outro, do sculo XVIII...
Plantas se alimentam de solo?
Figura 1.
Antes:
Solo: 90 Kg
rvore: 2,25 Kg
Depois:
Solo: 89,9 Kg
rvore: 76,1 Kg
O experimento do mdico alemo
J an-Baptista van Helmunt (1580-1644):
Plantas purificam o ar?
Figura 2.
Antes:
Vela acesa
Depois:
Vela apagada
Os experimentos do qumico ingls
J oseph Priestley (1733-1804):
Experimento 1
Plantas purificam o ar?
Figura 3.
Antes:
Vela acesa
Depois:
Vela acesa
Os experimentos do qumico ingls
J oseph Priestley (1733-1804):
Experimento 2
Plantas purificam o ar?
Figura 4.
Antes:
Rato morto
Depois:
Rato vivo
Os experimentos do qumico ingls
J oseph Priestley (1733-1804):
Experimento 3
Um outro tipo de experimento...
Objetivo: comparar o efeito do uso de
msica ambiente nas salas de trabalho de
programadores
Ao todo, 12 programadores
participaram do experimento,
cada um em uma sala
4 deles foram sorteados para ouvir msica clssica
em suas salas,
4 deles foram sorteados para ouvir msica popular
brasileira em suas salas, e
4 deles foram sorteados para no ter msica
ambiente
Um outro tipo de experimento...
Resultado hipottico 1:
0 5 10 15 20 25 30 35
nmero de falhas nos programas
desenvolvidos em uma semana de trabalho
CLSSICA
MPB
S/ MSICA
Um outro tipo de experimento...
Resultado hipottico 2:
0 5 10 15 20 25 30 35
nmero de falhas nos programas
desenvolvidos em uma semana de trabalho
CLSSICA
MPB
S/ MSICA
Tipos de experimentos:
Experimentos absolutos
Experimentos comparativos
EXPERIMENTO?
Definio:
Um experimento pode ser definido como um
conjunto de procedimentos destinados a coletar
evidncia contra uma hiptese formulada.
Planejamento estatstico de
experimentos...
Experimentos comparativos
Motivao histrica: agricultura
O legado de R. A. Fisher
Exemplos de questes
investigadas por experimentos
planejados:
Vitamina C ajuda a prevenir resfriado?
A variedade de milho B, modificada
geneticamente, mais produtiva que a
variedade A?
Qual dieta para gado leiteiro resulta em
maior produo de leite?
Exemplos de questes
investigadas por experimentos
planejados:
Qual linguagem de programao mais
eficiente para produzir determinado
software?
Qual, dentre softwares concorrentes, o
que apresenta melhor qualidade?
Qual formulao de banho deve ser
preferida na fabricao de circuitos
integrados?
Noes bsicas
FATOR
Nveis de um fator
Exemplos:
Fator A: linguagem de
programao
Fator B: sistema
operacional
Nveis do Fator A:
C++, J AVA
Nveis do Fator B:
Linux, Windows
Noes bsicas
TRATAMENTO
Exemplos:
Experimento 1: comparao de
linguagens de programao
Tratamentos:
1. C++ 2. JAVA
Experimento 2: comparao de
estratgias de desenvolvimento de
software
Noes bsicas
TRATAMENTO
Exemplos:
Tratamentos:
1. C++ em Linux
2. JAVA em Linux 4. JAVA em Windows
3. JAVA em Windows
Nos experimentos 1 e 2, o nvel de
experincia do programador pode ser
considerado um fator de rudo
Noes bsicas
FATOR DE RUDO
Exemplo:
Um caso pra pensar...
Imagine um experimento para comparar
dois mtodos de programao, com
respeito ao tempo decorrido at que um
certo protocolo tenha sido completo...
Mtodo A Mtodo B
120 min
125 min
Noes bsicas
UNIDADE EXPERIMENTAL
REPLICAO
ERRO EXPERIMENTAL
Esquema bsico das fontes
de variaes de um
experimento
Observao = Efeito do plano experimental
+ Efeito do tratamento
+ Efeito do erro experimental
O plano experimental
completamente aleatorizado
Comparar t tratamentos
Disponveis rt unidades experimentais
Cada u.e. tem a mesma chance de
receber um determinado tratamento
Cada tratamento aplicado em r
unidades experimentais
O plano experimental completamente
aleatorizado: idia da anlise
0 5 10 15 20 25 30 35
nmero de falhas nos programas
desenvolvidos em uma semana de trabalho
CLSSICA
MPB
S/ MSICA
O experimento da msica revisto:
Variao dentro dos tratamentos
O plano experimental completamente
aleatorizado: idia da anlise
0 5 10 15 20 25 30 35
nmero de falhas nos programas
desenvolvidos em uma semana de trabalho
CLSSICA
MPB
S/ MSICA
O experimento da msica revisto:
Variao entre tratamentos
O plano experimental completamente
aleatorizado: idia da anlise
Se
Variao entre tratamentos
for muito maior do que
Variao dentro dos tratamentos
Ento h evidncia contra a
hiptese de que no existe
diferena de tratamentos
O plano experimental completamente
aleatorizado: anlise formal
Modelo linear derivado:
Gerao de uma ANOVA:
O plano experimental completamente
aleatorizado: anlise formal
Gerao de uma ANOVA:
SQTotal SQEntre SQDentro = +
SQTotal SQTrat SQResduo = +
O plano experimental completamente
aleatorizado: anlise formal
ANOVA Plano Completamente Aleatorizado
F.V. G.L. S.Q. Q.M. F p
Tratamento
Resduo
Total
t-1
t(r-1)
rt-1
SQTrat
SQResduo
SQTotal
QMTrat
QMResduo
Fo p
QMTrat SQTrat
t-1
SQResduo
t(r-1)
Fo
QMResduo
=
=
=
/
/
/
QMTrat QMResduo
p = prob(|F|>Fo)
O plano experimental completamente
aleatorizado: anlise experimento msica
Resultado hipottico 1
Anlise de resduos
O plano experimental completamente
aleatorizado: anlise experimento msica
ANOVA Plano Completamente Aleatorizado
F.V. G.L. S.Q. Q.M. F p
Tratamento
Resduo
Total
2
11
9
1379,2
187,5
689,6
1566,7
20,8
33,1
<0,0001
Resultado hipottico 1
O plano experimental completamente
aleatorizado: anlise experimento msica
Resultado hipottico 2
Anlise de resduos
O plano experimental completamente
aleatorizado: anlise experimento msica
ANOVA Plano Completamente Aleatorizado
F.V. G.L. S.Q. Q.M. F p
Tratamento
Resduo
Total
2
11
9
262,5
1043,75
131,25
115,97
1306,25
1,13
0,36
Resultado hipottico 2
Princpios Estatsticos de
Experimentao
As anlises conduzidas obedeceram a
dois importantes princpios de
experimentao:
O princpio da replicao
O princpio da aleatorizao
Princpios Estatsticos de
Experimentao
O princpio do controle local
Ao todo, 12 programadores
participaram do experimento,
cada um em uma sala
3 deles foram agrupados por serem programadores
sniores, 3 por serem intermedirios, 3 jniores e 3
recm-formados
Em cada grupo, um foi sorteado para ouvir msica
clssica, outro para mpb e outro para controle
O experimento anterior um exemplo de
um experimento aleatorizado em blocos
completos
Se houver diferena de desempenho de
acordo com a experincia do
programador, esse plano experimental
ser mais eficiente que o plano
completamente aleatorizado
O plano experimental
aleatorizado em blocos
completos
O plano experimental em
quadrado latino
O plano aleatorizado em blocos
completos controla um fator de rudo
Em situaes em que necessrio o
controle de dois fatores de rudo
simultneamente, possvel, por
exemplo, usar um plano em quadrado
latino
Um quadrado latino
reduzido, de ordem 3:
L1
L2
L3
C1 C2 C3
C
A
B
B C
B
C
A
A
Mensagem final
Planejar bem um experimento, do ponto de
vista estatstico essencial
Os princpios estatsticos de experimentao
so fundamentais para garantir validade e
eficincia do estudo
Para saber mais... Box, Hunter & Hunter
Statistics for experimenters, 2
nd
ed. J ohn Wiley
and Sons