65

EQUAES ESTRUTURAIS APLICADAS SATISFAO DOS ALUNOS: UM ESTUDO NO CURSO DE CINCIAS CONTBEIS DA UNIVERSIDADE FEDERAL DE SANTA MARIA
STRUCTURAL EQUATIONS APPLIED TO STUDENT SATISFACTION: A STUDY IN THE ACCOUNTANCY COURSE AT THE FEDERAL UNIVERSITY OF SANTA MARIA

KELMARA MENDES VIEIRA

Doutora em Administrao e Professora Adjunta do Departamento de Cincias Administrativas PPGA/CCSH da Universidade Federal de Santa Maria E-mail: kelmara@smail.ufsm.br

FELIPE TAVARES MILACH

Mestrando em Administrao pelo Programa de Ps-Graduao em Administrao da Escola de Administrao da Universidade Federal do Rio Grande do Sul E-mail: felipemilach@terra.com.br

DANIELA HUPPES
Mestre em Administrao pelo Programa de Ps-Graduao em Administrao da Universidade Federal de Santa Maria E-mail: danielahuppes@terra.com.br

RESUMO
O presente estudo tem como objetivo avaliar os determinantes da satisfao geral dos alunos de Cincias Contbeis da Universidade Federal de Santa Maria em relao ao Curso. Para tanto, utilizaram-se os construtos Envolvimento do Professor, Envolvimento do Estudante, Interao Estudante-Professor, Demandas do Curso e Organizao do Curso, apresentados no modelo de equaes estruturais de Paswan e Young (2002). A esse modelo foi acrescentada a varivel Satisfao Geral, a m de vericar se a satisfao dos estudantes em relao ao Curso pode ser explicada pelos construtos. O instrumento de coleta de dados utilizado foi um questionrio composto de 42 questes, aplicado a 224 acadmicos. O modelo de equaes estruturais, inicialmente proposto, foi testado e alterado de acordo com os resultados obtidos nas anlises. Procurando tornar o modelo mais adequado, optou-se por se retirar o construto Demandas do Curso. Os resultados do modelo de mensurao demonstraram a validade dos construtos Envolvimento do Professor, Interesse do Estudante, Interao Professor-Estudante e Organizao do Curso. No modelo, so comprovadas cinco das oito hipteses estabelecidas originalmente e indicaram a retirada do construto Demandas do Curso. O modelo estrutural testou oito hipteses, das quais cinco foram conrmadas. O modelo ajustado mostrou-se adequado para mensurar a Satisfao Geral dos estudantes do Curso de Cincias Contbeis da Universidade Federal de Santa Maria, comprovando que os construtos Envolvimento do Professor e Interesse do Estudante inuenciam positivamente a Satisfao Geral do estudante em relao ao curso. Palavras-chave: Equaes Estruturais. Satisfao Geral. Acadmicos de Cincias Contbeis.

ABSTRACT
The objective of this paper is to evaluate the factors determining general satisfaction among Accountancy students at the Federal University of Santa Maria, in relation to the course. Therefore, Teacher Involvement, Student Involvement, Teacher-Student Interaction, Course Demands and Course Organization constructs were used and presented in the structural equation model of Paswan and Young (2002). The variable General Satisfaction was added to this model to verify if student satisfaction in relation to the course can be explained through these constructs. Data were collected through a questionnaire composed of 42 questions, answered by 224 students. The initially proposed structural equation model was tested and altered in accordance with the analysis results. To make a more adequate model, the construct of Course Demands was eliminated. The structural model tested eight hypotheses, ve of which were conrmed. The adjusted model proved to be adequate for measuring General Satisfaction of Accountancy students at the Federal University of Santa Maria, reafrming that the constructs Teacher Involvement and Student Interest positively inuenced the General Satisfaction of the student in relation to the course. Keywords: Structural Equation. General Satisfaction. Accounting Students.
Recebido em 12.06.2007 Aceito em 08.08.2008 2 verso aceita em 27.08.2008 * Artigo apresentado no 31 Encontro ANPAD, Rio de Janeiro-RJ, 2007.

R. Cont. Fin. USP So Paulo v. 19 n. 48 p. 65 - 76 setembro/dezembro 2008

66

Kelmara Mendes Vieira Felipe Tavares Milach Daniela Huppes

1 INTRODUO
O aumento da quantidade de Instituies de Ensino Superior (IES) no pas, principalmente a partir da vigncia da Lei de Diretrizes e Bases da Educao Nacional (Lei 9394/96), altera o panorama nacional de ensino e cria mecanismos que permitem sociedade fazer comparaes de desempenho entre as instituies. Isso, conseqentemente, obriga as IES a se preocuparem, cada vez mais, com os cursos oferecidos. Da mesma forma que qualquer outra organizao moderna, as Instituies de Ensino Superior devem cumprir exigncias de qualidade, competncia e produtividade. Essas instituies se deparam com uma necessidade crescente de conhecer o seu pblico alvo, para que possam oferecer programas e servios de acordo com as exigncias do mercado e do perl de seus alunos. Nesse cenrio, a qualidade dos servios oferecidos e a satisfao dos discentes so fundamentais para as Instituies de Ensino Superior que buscam sobreviver no mercado educacional. A qualidade do curso de graduao e o envolvimento e a satisfao dos acadmicos com o curso so fatores que determinam o perl e o desempenho dos prossionais que ingressaro no mercado de trabalho; e a formao de prossionais competentes uma cobrana da sociedade. Assim, os alunos devem ser o centro das atenes das IES que almejam melhorar seus cursos, de forma a assegurar uma formao nal de maior qualidade. Outros dois indicadores crticos, principalmente para uma instituio pblica, so: o tempo que os alunos levam para concluir o curso e o nmero de desistentes. Esses ndices tambm so inuenciados pelo nvel de satisfao do corpo discente, pois quanto mais satisfeito ele estiver, menor ser o nmero de desistentes e mais rapidamente os estudantes concluiro o seu curso. Isso garante um retorno maior para a sociedade que mantm as Instituies de Ensino Superior Pblicas. Logo, monitorar os nveis de satisfao dos acadmicos, avaliando o seu interesse e o dos professores, as formas de ensino, os currculos e a organizao do curso, uma maneira de garantir a satisfao das necessidades tanto dos alunos como da sociedade. Em meio a tais reexes, o objetivo deste trabalho avaliar quais fatores determinam a Satisfao Geral dos alunos de Cincias Contbeis da Universidade Federal de Santa Maria em relao ao Curso. Para atingir tal objetivo, a pesquisa, aplicada atravs de um questionrio, testou os construtos Envolvimento do Professor, Envolvimento do Estudante, Interao Estudante-Professor, Demandas do Curso e Organizao do Curso, apresentados no modelo de equaes estruturais de Paswan e Young (2002). A esses construtos foi acrescentada a varivel Satisfao Geral, para vericar se a satisfao dos estudantes em relao ao Curso pode ser explicada pelos construtos propostos. Como pode ser constatado nas publicaes nacionais e internacionais, a maioria das pesquisas sobre avaliao e satisfao dos estudantes em relao ao seu curso de graduao usa mtodos estatsticos que possibilitam examinar apenas uma nica relao de cada vez, como a correlao, a regresso mltipla e anlises de varincia (CLAYSON; HALEY, 1990; MARKS, 2000). No entanto, o uso do modelo de equaes estruturais permite ao pesquisador testar um nmero maior de relaes entre as variveis e os construtos em anlise, sendo, portanto, esse o modelo utilizado neste estudo. O trabalho est estruturado em quatro partes. Na primeira, so expostos os construtos indicados por Paswan e Young (2002) e utilizados na pesquisa, alm da varivel Satisfao Geral. Aps, apresentam-se os procedimentos metodolgicos e a anlise dos dados, que contm a validao do modelo. Por ltimo, expem-se as concluses do estudo, com as limitaes e as principais contribuies da pesquisa.

2 DESENVOLVIMENTO DO MODELO
A presente pesquisa foi realizada a partir dos construtos Envolvimento do Professor, Envolvimento do Estudante, Interao Estudante-Professor, Demandas do Curso e Organizao do Curso, apresentados por Paswan e Young (2002). A esses construtos incluiu-se a varivel Satisfao Geral, com o objetivo de vericar se os construtos analisados podem explicar a satisfao geral do acadmico com o curso de Cincias Contbeis. curso o determinante principal no resultado da avaliao dos estudantes em relao ao processo. O construto Envolvimento do Professor diz respeito a fatores como a percepo do aluno em relao ao entusiasmo e interesse do professor, a habilidade do professor em explicar o contedo, utilizando exemplos e de forma que os alunos compreendam os assuntos. J o construto Interesse do Estudante formado por fatores como o nvel de ateno e interesse que o aluno d s aulas e a forma como esse percebe a sua evoluo intelectual ao longo do curso, tornando-se, ou no, mais competente. Vrios pesquisadores defendem que o envolvimento do professor tem grande inuncia no interesse do aluno e vice-versa. Cashin (1995) sugere que a motivao dos estudantes possui um papel importante no resultado da

2.1 Envolvimento do Professor e Interesse do Estudante

O modelo de Paswan e Young (2002) considera os construtos Envolvimento do Professor e Interesse do Estudante como dados em funo dos demais construtos, sendo, portanto, construtos de segunda ordem. Marsh (1982) e Cashin (1988) argumentam que o professor e no o

R. Cont. Fin. USP So Paulo v. 19 n. 48 p. 65 - 76 setembro/dezembro 2008

EQUAES ESTRUTURAIS APLICADAS SATISFAO DOS ALUNOS: UM ESTUDO NO CURSO DE CINCIAS CONTBEIS DA UNIVERSIDADE FEDERAL DE SANTA MARIA

67

instruo. Clayson e Haley (1990), por outro lado, argumentam que o interesse do estudante pode ser inuenciado pelo envolvimento do professor. Para esses autores, aqueles estudantes que se sentem desaados e que percebem o seu desenvolvimento intelectual ao longo do curso tendem a compartilhar com os seus professores as razes do seu sucesso.

Hiptese 4: Um nvel mais alto de Demandas do Curso conduzir a um nvel mais baixo de Interesse do Estudante no curso.

2.4 Organizao do curso

A Organizao do Curso, ltimo construto proposto no modelo de Paswan e Young (2002), avalia, entre outros aspectos, se os conceitos foram relacionados sistematicamente e a grade curricular do curso foi esboada adequadamente. Para esse construto so indicadas as seguintes hipteses: Hiptese 5: Um nvel mais alto da Organizao do Curso conduzir percepo de um nvel mais alto de Envolvimento do Professor. Hiptese 6: Um nvel mais alto da Organizao do Curso conduzir a um nvel mais alto de Interesse do Estudante no curso.

2.2 Interao Professor-Estudante

O primeiro construto apresentado chamado Interao Professor-Estudante e pode ser representado por fatores como a oportunidade do aluno discutir, questionar e esclarecer suas dvidas durante as aulas, bem como possuir a liberdade para expressar os seus pontos de vista. Paswan e Young (2002) propuseram que a Interao Professor-Estudante possa inuenciar as duas variveis endgenas do estudo: o Envolvimento do Professor e o Interesse do Estudante. J Grunenwald e Ackerman (1986), ao realizarem uma pesquisa com estudantes de administrao, concluram que a interao tem uma inuncia importante na efetividade do ensino. Assim, as hipteses relacionadas a esse construto so: Hiptese 1: Um grau mais alto de Interao ProfessorEstudante conduzir a um nvel maior de Envolvimento do Professor. Hiptese 2: Um grau mais alto de Interao ProfessorEstudante conduzir a um nvel maior de Interesse do Estudante no curso.

2.5 Satisfao
Conforme defendem diversos autores, a satisfao dos alunos um fator fundamental para o sucesso das Instituies de Ensino Superior (GONALVES FILHO et al., 2003; SOUKI; PEREIRA, 2004; CODA; SILVA, 2004; WALTER et al., 2005; DE TONI et al., 2006). A satisfao envolve o atendimento das expectativas dos acadmicos, supondose, assim, que a ela se relaciona ao Interesse do Estudante, Envolvimento do Professor, Interao Estudante-Professor, Organizao do Curso e Demandas do Curso. Portanto, o presente estudo prope-se a testar se os construtos indicados por Paswan e Young (2002) podem ser utilizados para mensurar a Satisfao Geral dos estudantes de uma IES e formulam-se as seguintes hipteses: Hiptese 7: Um nvel mais elevado de Envolvimento do Professor conduzir a um nvel mais alto de Satisfao Geral dos alunos em relao ao curso. Hiptese 8: Um nvel mais alto de Interesse do Estudante em relao ao curso conduzir a uma percepo de um maior grau de Satisfao Geral.

2.3 Demandas do Curso

O construto Demandas do Curso envolve fatores como o modo com que o professor passa o contedo aos alunos, a validade do desenvolvimento de trabalhos em sala de aula e o nvel das leituras indicadas pelo professor. Clayson e Haley (1990) armam que h uma correlao negativa entre o rigor do curso e a forma como os alunos avaliam o seu aprendizado. Com base nessa informao, prope-se a testar se: Hiptese 3: Um nvel mais alto de Demandas do Curso conduzir a um baixo nvel, percebido, do Envolvimento do Professor.

3 PROCEDIMENTOS METODOLGICOS
O estudo considerou como universo de pesquisa todos os alunos matriculados no curso de Cincias Contbeis da Universidade Federal de Santa Maria (UFSM) no segundo semestre letivo de 2006, totalizando 328 acadmicos. Partindo do universo de pesquisa, a amostra foi formada por todos os alunos presentes em sala de aula durante duas semanas compreendidas entre os meses de janeiro e fevereiro de 2007, totalizando 224 estudantes, o equivalente a 68% do total da populao. Como instrumento de coleta de dados optou-se pela utilizao de um questionrio, formado por trs blocos distintos de perguntas. O primeiro bloco aborda aspectos pessoais e socioeconmicos. Nesse bloco, foram feitas questes sobre o sexo, a renda familiar e idade do respondente. O segundo questiona a condio do respondente no curso, englobando questes como o semestre cursado, a formao escolar, a forma de ingresso no curso, entre outras. E o terceiro bloco formado por questes desenvolvidas a partir do modelo de Paswan e Young (2002), alm de questes acrescentadas pelos autores. Foram acrescentadas questes em cada um dos cinco construtos propostos e uma questo sobre a Satisfao Geral dos estudantes com o curso. Para as questes desse bloco foi utilizada uma escala tipo Likert (Anexo 1).

R. Cont. Fin. USP So Paulo v. 19 n. 48 p. 65 - 76 setembro/dezembro 2008

68

Kelmara Mendes Vieira Felipe Tavares Milach Daniela Huppes

Tendo em vista o objetivo do trabalho optou-se pela modelagem de equaes estruturais (MEE) porque, conforme destacam Hair et al. (2005), enquanto tcnicas como a regresso mltipla, a anlise fatorial, a anlise de varincia e outras avaliam uma nica relao entre as variveis dependentes e independentes, a MEE possibilita a estimao

simultnea de uma srie de equaes mltiplas distintas, mas que se inter-relacionam. Assim, o modelo inicial a ser testado pode ser visualizado na Figura 1 . Para Anderson e Gerbing (1998), o modelo hbrido deve ser avaliado em dois momentos: o primeiro envolve a construo de um modelo de mensurao aceitvel atravs de

e24 e25 e26 e27 e28 e29 e30

1 1 1 1 1 1 1

Q24 Q25 Q26 Q27 Q28 Q29 Q30

1

e11
1

e12
1

e13
1

e14
1

e15
1

e16
1

e17
1

Q11 Interao professorestudante

Q12

Q13

Q14

Q15

Q16

Q17

Envolvimento do professor

eEP

e31 e32 e33 e34 e35 e36

1 1 1 1 1 1

Q31 e43 Q32 Q33 Q34

1 1 1

Demanda do curso

Satisfao geral

Q35 Q36

1 1

e37 e38 e39 e40 e41 e42

1 1

Q37 Q38 Q39 Q40 Q41 Q42 Figura 1 Modelo inicial

1

Interesse do estudante

eIE

1 1 1

Organizao do curso

Q18
1

Q19
1

Q20
1

Q21
1

Q22
1

Q23
1

e18

e19

e20

e21

e22

e23

R. Cont. Fin. USP So Paulo v. 19 n. 48 p. 65 - 76 setembro/dezembro 2008

EQUAES ESTRUTURAIS APLICADAS SATISFAO DOS ALUNOS: UM ESTUDO NO CURSO DE CINCIAS CONTBEIS DA UNIVERSIDADE FEDERAL DE SANTA MARIA

69

uma Anlise Fatorial Conrmatria. Determinado o modelo de mensurao, o segundo momento consiste em avaliar as relaes entre os construtos, determinadas pelo conjunto de regresses que compem o modelo estrutural. Portanto, seguindo essa recomendao, a avaliao do modelo foi realizada em duas etapas. Na primeira, utilizou-se a Anlise Fatorial Conrmatria (AFC) para validar os construtos. Na segunda, o modelo hbrido foi validado atravs dos ndices de ajuste do modelo global e da signicncia e magnitude dos coecientes das regresses estimadas. De acordo com Pedhazur e Schmelkin (1991), a AFC um modelo que procura mensurar as relaes entre os indicadores (variveis observadas) e os construtos (fatores, variveis latentes). A utilizao da AFC, na modelagem de equaes estruturais, possibilita a avaliao da conabilidade e da validade dos construtos (GARVER; NENTZER, 1999; HAIR et al., 2005). A conabilidade indica o grau de consistncia interna entre os mltiplos indicadores de um construto, referindo-se extenso na qual um mesmo instrumento de medida produz resultados coerentes a partir de diversas mensuraes (SCHUMACKER; LOMAX, 1996), e a validade refere-se extenso na qual as medidas denem um determinado construto (CHURCHILL, 1979). Para a validao de um construto, devem ser observadas a validade convergente, a unidimencionalidade e a conabilidade. De acordo com Malhotra (2001), a validade convergente mede a extenso em que a escala se correlaciona positivamente com outras medidas do mesmo construto. A validade convergente foi avaliada a partir do exame das cargas fatoriais e das medidas de ajuste. As cargas fatoriais descrevem as relaes entre as variveis observadas e o construto, gerando informaes sobre a extenso na qual uma varivel observvel capaz de medir um construto (SCHUMACKER; LOMAX, 1996). Alm da observao da magnitude e signicncia estatstica dos coecientes padronizados, procurou-se analisar as medidas absolutas de ajuste e as medidas de ajuste comparativas. As medidas absolutas de ajuste so aquelas que avaliam o grau em que o modelo global prediz a matriz de covarincia ou correlao. Testou-se a validade convergente dos construtos atravs das seguintes medidas: Estatstica qui-quadrado (): de acordo com Hair et al. (2005), a signicncia das diferenas entre a matriz observada e a matriz estimada pode ser avaliada pelo . O que se busca, na realidade, um valor de no signicativo dado que H0 indica que os dados se ajustam ao modelo. No caso de o valor de ser signicativo, alguns autores defendem que se possa dividir o seu valor pelos graus de liberdade (/GL). Para Kline (1998), uma razo menor do que trs aceitvel, j para Hair et al. (2005) esse valor deve ser igual ou inferior a cinco. Root Mean Squares Residual (RMR): se no houver discrepncias entre as covarincias observadas e aquelas determinadas no modelo, o ajuste perfeito e tem-se RMR igual a zero. Conforme aumentam

as discrepncias, o ndice aumenta. Kline (1998) considera um valor menor do que 0,10 aceitvel. Root Mean Square Error of Aproximation (RMSA): alm das discrepncias entre a matriz predita e a observada, leva em considerao os graus de liberdade. Para Hair et al. (2005) valores inferiores a 0,08 so considerados aceitveis. Goodness-of-Fit Index (GFI): considera a quantidade de varincia e covarincia da matriz observada que reproduzida pela matriz estimada (SCHUMACKER; LOMAX, 1996). Os valores geralmente variam de zero a um (ajuste perfeito), no entanto, conforme destaca Kline (1998), podem assumir valores negativos ou maiores do que um quando a amostra pequena ou quando o modelo sobre-identicado. Ainda se estimou a validade convergente do construto atravs de medidas de ajuste comparativas. Pode-se dizer que essas medidas so aquelas utilizadas para comparar o modelo proposto com o modelo nulo. Utilizaram-se as seguintes medidas de ajuste comparativas: Comparative Fit Index (CFI): segundo Hair et al. (2005), trata-se de uma medida comparativa global entre os modelos estimado e nulo. De acordo com Kline (1998) valores superiores a 0,9 so desejveis. Normed Fit Index (NFI): aponta a proporo em que o ajuste do modelo proposto melhor do que o ajuste do modelo nulo. Hair et al. (2005) destacam que no existe um valor absoluto que indique um nvel de ajuste aceitvel, mas recomenda-se que seja superior a 0,9. Tucker-Lewis Index ou Non-Normed Fit Index (NNFI): deve ser interpretado da mesma forma que o NFI. O NNFI, no entanto, inclui um ajuste para a complexidade do modelo. Recomenda-se um nvel superior a 0,9 (GARVER; MENTZER, 1999; HAIR et al., 2005). De acordo com Hair et al. (2005), aps o ajuste geral do modelo ter sido avaliado, pode-se, ainda, examinar cada construto quanto unidimensionalidade e conabilidade. A unidimensionalidade o grau em que um conjunto de itens representa apenas um construto. J a conabilidade, segundo Schumacker e Lomax (1996), indica o grau de consistncia interna entre os mltiplos indicadores de um construto, referindo-se extenso na qual um mesmo instrumento de medida produz resultados coerentes a partir de diversas mensuraes. Para avaliar a unidimensionalidade do construto foram analisados os resduos padronizados relativos aos indicadores de cada varivel latente. De acordo com Garver e Mentzer (1999), resduos elevados podem indicar, entre outras coisas, que os itens so inadequados. Para esse procedimento, foram considerados unidimensionais os construtos que apresentaram para todos os pares formados por variveis observadas, resduos padronizados menores do que 2,58 (p=0,05). Para mensurar a conabilidade, utilizou-se o Alfa de Crombach que, de acordo com Hair et al. (2005), deve possuir um valor superior a 0,7.

R. Cont. Fin. USP So Paulo v. 19 n. 48 p. 65 - 76 setembro/dezembro 2008

70

Kelmara Mendes Vieira Felipe Tavares Milach Daniela Huppes

4 ANLISE DOS DADOS

A aplicao dos questionrios foi realizada durante duas semanas entre os meses de janeiro e fevereiro de 2007, sendo abordados todos os alunos presentes em sala de aula durante esse perodo. Em relao primeira parte do questionrio observou-se que, dos 224 respondentes, 85 pertenciam ao turno diurno (38%) e 139 ao noturno (62%). Para a anlise dos dados, utilizaram-se o pacote estatstico SPSS e o software para modelagem de equaes estruturais Amos. Para vericar se h diferena estatstica signicante entre o nvel de satisfao dos alunos e o turno em que esto matriculados, por se tratar de uma varivel de razo, a satisfao foi avaliada a partir de um teste-t para diferena de mdias. Conforme exposto na Tabela 1 , a um nvel de signicncia de 0,05, no foi possvel rejeitar a hiptese nula (H0), concluindo-se que no existe diferena signicativa entre o nvel de satisfao dos alunos matriculados no turno diurno e os alunos matriculados no turno noturno. Diante desse resultado, optou-se por trabalhar com os dois cursos em conjunto sem separar a amostra segundo o turno. Em relao ao sexo dos estudantes, observou-se uma freqncia de 115 homens (51%) e 109 mulheres (49%). O teste t revelou que, em mdia, no h diferena na satisfao com o curso entre homens e mulheres (t=0,502, no
Tabela 1

signicativo a 5%). A idade mdia dos respondentes de 23 anos, estando a maioria cursando o segundo e o quarto semestre, 27% e 25%, respectivamente.

4.1 Validao individual dos construtos

Para a validao individual dos construtos foi realizada a Anlise Fatorial Conrmatria e os relacionamentos entre as variveis observadas e os seus construtos foram estimados utilizando o mtodo da mxima verossimilhana. Os resultados obtidos em relao aos ndices de ajuste do modelo e conabilidade podem ser visualizados na Tabela 2 . Partiu-se do modelo originalmente proposto para se obterem os ndices de ajuste iniciais. Caso o modelo no apresentasse valores satisfatrios para o seu nvel de conabilidade ou ndices de ajuste abaixo do recomendado pela literatura, optou-se por retirar aquelas variveis que apresentassem coecientes padronizados mais baixos. O construto inicialmente analisado foi o Envolvimento do Professor, formado por sete variveis. Aps o clculo de todos os ndices de ajuste considerados para o modelo vericou-se que o teste Qui-quadrado signicativo (p=0,000), indicando, assim, uma diferena entre a matriz observada e a matriz original. Algumas medidas de ajuste tambm apresentaram valores fora dos limites aceitveis: NFI e NNFI inferiores a 0,9 e o RMSEA superior a 0,08.

Teste t para diferena de mdia de satisfao dos alunos nos dois turnos
N 85 139 Mdia de Satisfao 70,85 68,52 Desvio Padro 13,87 15,25 0,846 0,449 T Sig.

Turno Diurno Noturno

Tabela 2

Resultado dos ndices de ajuste

Construtos

ndices de Ajuste

Envolvimento do Professor Inicial Final 7,149 p=0,210 5 0,987 0,993 0,978 0,986 0,026 0,044 0,785

Interesse do Estudante Inicial 21,031 p=0,013 9 0,969 0,961 0,935 0,935 0,045 0,077 0,772 Final 14,869 p=0,011 5 0,974 0,963 0,947 0,927 0,040 0,094 0,774

Interao EstudanteProfessor Inicial 34,333 p=0,002 14 0,958 0,937 0,900 0,906 0,054 0,081 0,743 Final 2,624 p=0,269 2 0,994 0,997 0,989 0,992 0,017 0,037 0,774

Demandas do Curso Inicial 68,551 p=0,000 10 0,916 0,439 0,426 0,159 0,125 0,162 0,444 Final 0,203 p=1,000 0,652 0,999 1,000 0,996 1,050 0,011 0,000 0,359

Organizao do curso Inicial 15,907 p=0,069 9 0,978 0,975 0,946 0,959 0,040 0,059 0,764 Final 7,712 p=0173 5 0,987 0,988 0,968 0,977 0,031 0,049 0,754

Qui-quadrado Graus de Liberdade GFI CFI NFI NNFI RMR RMSEA Alpha de Crombach

52,69 p=0,000 14 0,938 0,915 0,889 0,873 0,052 0,111 0,814

R. Cont. Fin. USP So Paulo v. 19 n. 48 p. 65 - 76 setembro/dezembro 2008

EQUAES ESTRUTURAIS APLICADAS SATISFAO DOS ALUNOS: UM ESTUDO NO CURSO DE CINCIAS CONTBEIS DA UNIVERSIDADE FEDERAL DE SANTA MARIA

71

Sendo assim, diante desses resultados iniciais decidiu-se por modicar o modelo e retiraram-se as variveis Q. 15 e Q. 16. O modelo nal apresentou um nvel satisfatrio para o teste Qui-quadrado (p=0,210), que passou a ser no signicativo. Todos os demais ndices de ajuste apresentaram resultados melhores do que os valores mnimos sugeridos, inclusive aqueles que mostraram valores abaixo do sugerido no modelo inicial (NFI=0,978, NNFI=0,986, RMSEA=0,044). Em relao conabilidade, apesar do valor do Alfa de Crombach ter sido menor, ainda pode-se considerar o novo valor (0,785) como satisfatrio. O construto Interesse do Estudante era formado inicialmente por seis variveis. Vericou-se que o modelo apresentou para o teste Qui-quadrado um valor de p=0,013, indicando, em uma primeira anlise, um valor signicativo. Todos os ndices de ajustes absolutos e comparativos caram acima dos valores mnimos exigidos. O Alfa de Crombach tambm apresentou um valor aceitvel (0,772). Foram feitas simulaes que demonstraram que nem mesmo a retirada do construto daquelas variveis cujos coecientes padronizados apresentavam valores mais baixos melhorava o ajuste do modelo. Sendo assim, optou-se por manter o modelo como descrito originalmente. A literatura mostra que o teste Qui-Quadrado inuenciado pelo tamanho amostral e sugere uma correo pelos graus de liberdade (HAIR et al., 2005; KLINE, 1998). A diviso do valor do qui-quadrado pelos graus de liberdade (/GL) teve como resultado o valor de 2,337 (21,031/9), de acordo com Kline (1998) uma razo menor do que trs considerada aceitvel. Analisou-se, em seguida, o construto Interao Professor-Estudante. O modelo original apresentou um teste de Qui-quadrado expressivo (p=0,002), indicando a existncia de uma diferena signicativa entre a matriz observada e a matriz estimada. Praticamente todos os ndices de ajuste apresentaram valores melhores do que os resultados mnimos exigidos; apenas o ndice de ajuste absoluto RMSEA indicou um valor pouco acima do mnimo exigido
Tabela 3
Construto Variveis Q. 11 Q. 12 Q. 13 Q. 14 Q. 17 Q. 18 Q. 19 Q. 20 Q. 21 Q. 23 Coeciente Padronizado 0,776 0,820 0,527 0,506 0,640 0,603 0,719 0,588 0,630 0,679

(0,081). O Alfa de Crombach do construto, por sua vez, apresentou um valor satisfatrio (0,743). Assim, retiraram-se do modelo original as variveis cujos coecientes padronizados apresentavam os menores valores. Excluram-se, dessa forma: Q. 28 (C.P.=0,441), Q. 29 (C.P.=0,453) e Q. 30 (C.P.=0,246). Calcularam-se os ndices para o novo modelo. O Qui-quadrado apresentou uma reduo expressiva, passando a no ser signicativo (p=0,269). Os demais ndices de ajuste absolutos e comparativos apresentaram valores adequados, bem como o Alfa de Crombach, que revelou uma melhora no seu resultado (0,774). O modelo inicial do construto Demandas do Curso contava com seis vaiveis. Aps calcularem-se os ndices de ajuste absolutos e comparativos, vericou-se que apenas o GFI apresentou um valor dentro do aceitvel, 0,916; todos os demais ndices, assim como o Alfa de Crombach (0,444), apresentaram valores insatisfatrios. Procurouse, ento, criar novas combinaes entre as variveis, no entanto, nenhuma delas apresentou um Alfa de Crombach superior a 0,7. Dessa forma, optou-se por retirar esse construto do modelo. Por m tem-se o construto Organizao do Curso, cujo modelo original era formado por seis variveis. O modelo apresentou um teste de Qui-quadrado no signicativo (p=0,069). Todos os demais ndices de ajuste absolutos e comparativos apresentaram nveis adequados. O Alfa de Crombach tambm se mostrou satisfatrio 0,764. Seguindo o proposto por Garver e Mentzer (1999) excluiu-se a varivel Q. 41 por apresentar um coeciente padronizado inferior a 0,5 (Q.41=0,47). Aps retirar as variveis, os valores dos ndices de ajuste melhoraram um pouco; o Alfa de Crombach, no entanto apresentou uma pequena piora, passando de 0,764 para 0,719, mas mesmo assim o valor se manteve acima do limite recomendvel. Um resumo dos coecientes padronizados e da signicncia das variveis formadoras dos construtos nais pode ser visualizado na Tabela 3 .

Coecientes padronizados e signicncia

Z 10,697** 7,294** 6,995** 8,878** 7,506** 6,642** 6,958** 7,286** Construto Variveis Coeciente Padronizado 0,690 0,700 0,585 0,751 0,593 0,791 0,514 0,601 0,592 Z

Envolvimento do professor

Interao professorestudante

Interesse do estudante

Organizao do curso

Q. 24 Q. 25 Q. 26 Q. 27 Q. 37 Q. 38 Q. 39 Q. 40 Q. 42

8,190** 7,172** 8,440** 6,601** 7,516** 5,951** 6,658**

valor de z no calculado, pois o parmetro foi arbitrariamente xado em 1,0. ** signicativo ao nvel de 1%.

R. Cont. Fin. USP So Paulo v. 19 n. 48 p. 65 - 76 setembro/dezembro 2008

72

Kelmara Mendes Vieira Felipe Tavares Milach Daniela Huppes

4.2 Validao do modelo proposto

Aps a validao individual dos construtos, procurouse avaliar as hipteses propostas no modelo. Assim, o modelo individual dos construtos a ser considerado para o estudo pode ser visualizado na Figura 2 . Empregou-se a estratgia de aprimoramento do modelo. Os critrios utilizados para a realizao dos ajustes foram, em primeiro lugar, retirar os coecientes de regres1 1 1 1

so no signicativos. Em seguida procurou-se estabelecer correlaes entre os erros das variveis pertencentes a um mesmo construto. Por m, optou-se por adicionar correlaes no previstas inicialmente. Procurou-se relacionar os erros daquelas variveis que, preferencialmente, pertenciam a um mesmo construto; as demais relaes sugeridas pelo Amos s foram aceitas quando apresentavam justicativa do ponto de vista terico. O processo de retirada

e24 e25 e26 e27

Q24 Q25 Q26 Q27 Interao professorestudante Q11 Q12 Q13 Q14 Q17 e11
1

e12
1

e 13
1

e14
1

e17
1

Envolvimento do professor

eEP

e43
1

Satisfao geral

e37 e38 e39 e40

1 1

Q37 Q38 Q39 Organizao do curso Q40 Q18

1

Interesse do estudante

eIE

1 1

Q19
1

Q20
1

Q21
1

Q22
1

Q23
1

e18 Figura 2

e19

e20

e21

e22

e23

Modelo proposto nal

R. Cont. Fin. USP So Paulo v. 19 n. 48 p. 65 - 76 setembro/dezembro 2008

EQUAES ESTRUTURAIS APLICADAS SATISFAO DOS ALUNOS: UM ESTUDO NO CURSO DE CINCIAS CONTBEIS DA UNIVERSIDADE FEDERAL DE SANTA MARIA

73

envolveu a eliminao individual de cada uma das relaes no signicativas tendo em vista que, a cada retirada havia a necessidade de uma re-estimao do modelo devido s modicaes nos coecientes e na signicncia das demais variveis do modelo. Sendo assim, retirou-se, em primeiro lugar, a hiptese H2, que estabelecia a relao entre os construtos Interao Professor-Estudante e Interesse do Estudante, tendo em vista que o seu coeciente no era signicativo (0,257). Em seguida, seguindo o sugerido pelo Amos, procurou-se estabelecer correlaes entre os erros das variveis. Depois de re-estimar os coecientes para cada nova correlao incorporada, consideraram-se os seguintes erros correlacionados apresentados na Tabela 4 . Aps a retirada da relao no signicativa existente e da insero das correlaes sugeridas, o modelo nal aprimorado apresentou, conforme se pode visualizar na Tabela 5 , os seguintes ndices de ajuste. O modelo nal ajustado apresentou um qui-quadrado signicativo (p=0,000), contudo a relao /graus de liberdade apresentou razo menor que 3 (1,86), ndice considerado aceitvel (KLINE, 1998; HAIR et al., 2005). Em relao aos outros ndices, o GFI (0,889), o NFI (0,820) e o NNFI (0,889) apresentaram ndices menores que os limites desejveis. Para os demais ndices os valores apresentados foram considerados satisfatrios. Os coecientes padronizados e os seus respectivos graus de signicncia encontrados para as hipteses so apresentados na Tabela 6 . Atravs dos coecientes padronizados e dos seus respectivos graus de signicncia encontrados, possvel
Tabela 4

responder s hipteses levantadas neste estudo. Portanto, pode-se armar que: O construto Interao Professor-Estudante inuencia positivamente o construto Envolvimento do Professor (H1). O construto Organizao do Curso inuencia positivamente o construto Envolvimento do Professor (H5). O construto Organizao do Curso inuencia positivamente o construto Interesse do Estudante no curso (H6). O construto Envolvimento do Professor inuencia positivamente a Satisfao Geral do estudante em relao ao curso (H7). O construto Interesse do Estudante inuencia positivamente o grau de Satisfao Geral do estudante em relao ao curso (H8). As hipteses cujos coecientes padronizados no apresentaram valores signicantes e, portanto, foram excludas do modelo so: O construto Interao Professor-Estudante no conduzir a um nvel maior de Interesse do Estudante no curso (H2). Hiptese no signicante. O construto Demandas do Curso no conduzir a um baixo nvel, percebido, do Envolvimento do Professor (H3). Hiptese no signicante. O construto Demandas do Curso conduzir a um nvel mais baixo de Interesse do Estudante no curso (H4). Hiptese no signicante.

Correlao entre os erros

Coeciente 0,652** 0,278** 0,361** 0,294** 0,196** 0,281**

Correlao entre os erros Interao Estudante-Professor Organizao do curso e.19 - e.18 e.11 - e.12 e.40 - e.38 e.22 - e.23 e.38 - e.43

** signicativo ao nvel de 1%.

Tabela 5

ndices de ajuste Modelo nal aprimorado

ndices de Ajuste Qui-quadrado () Graus de Liberdade GFI CFI NFI NNFI RMR RMSEA Valores 296,961 p=0,000 160 0,889 0,906 0,82 0,889 0,059 0,062

R. Cont. Fin. USP So Paulo v. 19 n. 48 p. 65 - 76 setembro/dezembro 2008

74

Kelmara Mendes Vieira Felipe Tavares Milach Daniela Huppes

Tabela 6

Coecientes padronizados e signicncia das hipteses

Hiptese Coecientes Padronizados 0,243 0,633 0,588 0,347 0,406 Z 2,16* 5,49** 4,4** 4,32** 5,06**

Interesse do Estudante Interao Professor-Estudante Interesse do Estudante Organizao do Curso Envolvimento do Professor Organizao do Curso Satisfao Geral Interesse do Estudante Satisfao Geral Envolvimento do Professor

valor de z no calculado, pois o parmetro foi arbitrariamente xado em 1,0. *, **, indicam, respectivamente, signicativos ao nvel de 5% e 1%.

Das oito hipteses inicialmente propostas, cinco apresentaram coecientes estatisticamente signicantes ao nvel de, pelo menos, 5%: H1, H5, H6, H7 e H8. As hipteses H2, H3 e H4 revelaram coecientes no signicativos

a 5%. Cabe ressaltar que a hiptese H4 corroborou com o resultado encontrado por Paswan e Young (2002), j que elas tambm no apresentaram signicncia.

5 CONSIDERAES FINAIS
A satisfao um fator primordial para garantir a motivao do discente ao longo da sua formao acadmica, interferindo no aproveitamento do seu aprendizado e, conseqentemente, na competncia dos prossionais que sero inseridos no competitivo mercado de trabalho. Logo, compreender quais as variveis que inuenciam a satisfao dos acadmicos fundamental para as Instituies de Ensino Superior que desejam manter a qualidade dos servios prestados. Tendo como objetivo avaliar quais os fatores que determinam a satisfao geral dos alunos de Cincias Contbeis da Universidade Federal de Santa Maria, o presente trabalho partiu dos construtos propostos no modelo de equaes estruturais de Paswan e Young (2002). Aps alguns ajustes no modelo inicial, obteve-se um modelo adequado para mensurar a Satisfao Geral dos estudantes de uma Instituio de Ensino Superior. Oito hipteses foram testadas na pesquisa, sendo que dessas seis foram obtidas no estudo de Paswan e Young (2002) e duas foram formuladas pelos autores para vericar se os construtos do modelo inicial podem explicar a Satisfao Geral dos estudantes de uma IES em relao ao seu curso. Os resultados encontrados indicam que as hipteses 2, 3 e 4 no so signicantes. O construto Interao ProfessorEstudante no inuencia positivamente o construto Interesse do Estudante (H2). No foi validada a existncia do construto Demandas do Curso, o que implicou na retirada do modelo inicial das hipteses 3 e 4: o construto Demandas do Curso no conduzir a um baixo nvel, percebido, do Envolvimento do Professor (H3), o construto Demandas do Curso conduzir a um nvel mais baixo de Interesse do Estudante no curso (H4). A retirada desse do construto Demandas do Curso, presente no modelo inicial justicada pelo fato de os ndices de ajuste absolutos e comparativos, com exceo apenas para o GFI, apresentarem valores insatisfatrios. O Alfa de Crombach tambm possua um valor inaceitvel, abaixo de 0,7, indicando que as variveis no formam um construto. Cabe ressaltar que foram feitas simulaes para avaliar a possibilidade de essas variveis inuenciarem os construtos Envolvimento do Professor e Interesse do Estudante, mas nenhuma relao mostrou-se signicativa. Assim, o modelo nal encontrado composto por quatro construtos Envolvimento do Professor, Interesse do Estudante, Interao Professor-Estudante e Organizao do Curso e dezoito variveis. A pesquisa demonstrou que o modelo adequado para mensurar a Satisfao Geral dos estudantes do Curso de Cincias Contbeis da UFSM, uma vez que se comprovou que os construtos Envolvimento do Professor e Interesse do Estudante inuenciam positivamente a Satisfao Geral do estudante em relao ao curso. Entretanto, a validao do modelo como um instrumento de avaliao de satisfao de alunos carece de mais estudos. Sugere-se, portanto, a aplicao do instrumento em outros cursos e instituies.

R. Cont. Fin. USP So Paulo v. 19 n. 48 p. 65 - 76 setembro/dezembro 2008

EQUAES ESTRUTURAIS APLICADAS SATISFAO DOS ALUNOS: UM ESTUDO NO CURSO DE CINCIAS CONTBEIS DA UNIVERSIDADE FEDERAL DE SANTA MARIA

75

Referncias
ANDERSON, J. C.; GERBING, D. W. Structural equation modeling in practice: a review and recommended two-step approach. Psychological Bulletin, v. 103, n. 3, p. 411-423, 1988. BRASIL. Lei ordinria n. 9.394, de 20 de dezembro de 1996. CASHIN, W. E. Student ratings of teaching: a summary of the research. IDEA Paper, n. 20, Kansas State University, 1988. . Student ratings of teaching: the research revisited. IDEA Paper, n. 32, Kansas State University, 1995. CHURCHILL Jr., G. A. A paradigm of developing better measures of marketing constructs. Journal of Marketing Research, v. 16, p. 64-73, 1979. CLAYSON, D. E.; HALEY, D. A. Student evaluations in marketing: what is actually being measured? Journal of Marketing Education, v. 12, n. 3, p. 9-17, 1990. CODA, R.; SILVA, D. Sua escola de administrao uma excelente escola para se estudar? descobrindo dimenses de alunos em cursos de administrao: uma contribuio metodolgica. In: ENCONTRO NACIONAL DOS PROGRAMAS DE PS-GRADUAO EM ADMINISTRAO, 28., 2004, Curitiba. Anais... Curitiba: ENANPAD 2004. CD ROM. DE TONI, D. et al. Anlise da satisfao com instituies de educao superior e imagem: comparando instrumentos. In: ENCONTRO NACIONAL DOS PROGRAMAS DE PS-GRADUAO EM ADMINISTRAO, 30., 2006, Salvador. Anais... Salvador: ENANPAD 2006. CD ROM. GARVER, N. S.; MENTZER, J. T. Logistics research methods: employing structural equation modeling to test for construct validity. Journal of Business Logistics, v. 20, n. 1, p. 33-57, 1999. GONALVES FILHO, C.; GUERRA, R. S.; MOURA, A. Mensurao de satisfao, qualidade, lealdade, valor e expectativa em instituies de ensino superior: um estudo do modelo ACSI atravs de equaes estruturais. In: ENCONTRO NACIONAL DOS PROGRAMAS DE PSGRADUAO EM ADMINISTRAO, 27., 2003, Atibaia. Anais... Atibaia: ENANPAD 2003. CD ROM. GRUNENWALD, J. P.; ACKERMAN, L. A modied delphi approach for the development of student evaluations of faculty teaching. Journal of Marketing Education, v. 8, n. 2, p. 32-38, 1986. HAIR, J. F. et al. Anlise multivariada de dados. Porto Alegre: Bookman, 2005. KLINE, R. B. Principles and practice of structural equation modeling. New York: The Guilford Press, 1998, 354 p. MALHOTRA, N. K. Pesquisa de marketing: uma orientao aplicada. Porto Alegre: Bookman, 2001. MARKS, R. B. Determinants of student evaluations an indicators of global measures of instructor and course value. Journal of Marketing Education, v. 22, n. 2, p. 108-119, 2000. MARSH, H. W. The use of path analysis to estimate teacher and course effects in student ratings of instructional effectiveness. Applied Psychological Measurement, v. 6, p. 47-59, 1982. PASWAN, A. K.; YOUNG, J. A. Student evaluation of instructor: a nomelogical investigation using struuctural euation modeling. Journal of Marketing Education, v. 24, n. 3, p. 193-202, 2002. PEDHARZUR, E. J.; SCHMELKIN, L. P. Measurement, design, and analysis: an integrated approach. New Jersey: Lawrence Erlbaum, 1991. SCHUMACKER, R. E.; LOMAX, R. G. A beginners guide to structural equation modeling. New Jersey: Lawrence Erlbaum, 1996, 286 p. SOUKI, G. Q.; PEREIRA, C. A. Satisfao, motivao e comprometimento de estudantes de administrao: um estudo com base nos atributos de uma instituio de ensino superior. In: ENCONTRO NACIONAL DOS PROGRAMAS DE PS-GRADUAO EM ADMINISTRAO, 28., 2004, Curitiba. Anais... Curitiba: ENANPAD 2004. CD ROM. WALTER, S.; TONTINI, G.; DOMINGUES, M. Identicando oportunidades de melhoria em um curso superior atravs da anlise da satisfao dos alunos. In: ENCONTRO NACIONAL DE PROGRAMAS DE PS-GRADUAO EM ADMINISTRAO. 29., 2005, Rio de Janeiro. Anais... Rio de Janeiro: ENANPAD 2005. CD ROM.

NOTA Endereo dos autores

Universidade Federal de Santa Maria Departamento de Cincias Administrativas Rua Floriano Peixoto, 1184, sala 502 Santa Maria RS 97015-372 Av. Loureiro da Silva, 1500, ap. 610 Porto Alegre RS 90050-240 Rua Tuiuti, 1835, ap. 204 Santa Maria RS 97015-663

R. Cont. Fin. USP So Paulo v. 19 n. 48 p. 65 - 76 setembro/dezembro 2008

76

Kelmara Mendes Vieira Felipe Tavares Milach Daniela Huppes

ANEXO 1: TERCEIRO BLOCO DO QUESTIONRIO, DESENVOLVIDO A PARTIR DO MODELO DE PASWAN E YOUNG (2002)

Discordo Totalmente 11. Os professores apresentam o contedo de forma entusiasmada. 12. Ao ensinar, os professores parecem interessados. 13. Os exemplos utilizados pelos professores ajudam na compreenso do contedo. 14. Os professores procuram saber se o estudante aprendeu o contedo. 15. Os professores procuram relacionar a teoria com a prtica prossional. 16. Os professores so qualicados prossionalmente. 17. De uma maneira geral, avalio de forma positiva o desempenho dos professores. 18. Voc se sente interessado em aprender o contedo do curso. 19. Geralmente, voc ca atento em sala de aula. 20. Voc sente que o curso lhe desaa intelectualmente. 21. Voc acredita estar se tornando mais competente na sua rea de estudo. 22. Geralmente voc participa de discusses em sala de aula. 23. Avalio de forma positiva o meu desempenho ao longo do curso. 24. O professor encoraja o estudante a expressar sua opinio. 25. O professor receptivo a novas idias e diferentes pontos de vista. 26. Os estudantes tm oportunidade para fazerem perguntas. 27. Os professores geralmente estimulam a discusso em sala de aula. 28. Os professores disponiblizam a seus alunos materiais de estudo sobre as aulas dadas. 29. Os professores avaliam seus alunos com preciso e justia. 30. permitido aos alunos contatar os professores fora do ambiente da Universidade. 31. Os professores abordam muitos contedos (alm do necessrio). 32. Os professores apresentam o contedo muito rapidamente. 33. Os trabalhos realizados consomem muito tempo em relao ao conhecimento que agregam. 34. Voc acha as leituras indicadas muito difceis. 35. Os materiais utilizados pelos professores so de boa qualidade. 36. Os professores trabalham todos os contedos previstos na ementa das disciplinas. 37. Os professores relacionam os contedos de forma sistemtica. 38. O curso (as disciplinas) bem organizado. 39. Voc considera fcil fazer anotaes das apresentaes realizadas pelo professor. 40. A seqncia da grade curricular apresentada de maneira adequada. 41. Os funcionrios, geralmente, asseguram o bom andamento operacional do curso. 42. De uma maneira geral o curso atende as minhas expectativas. 1 1 1 1 1 1 1 1 1 1 1 1 1 1 1 1 1 1 1 1 1 1 1 1 1 1 1 1 1 1 1 1 2 2 2 2 2 2 2 2 2 2 2 2 2 2 2 2 2 2 2 2 2 2 2 2 2 2 2 2 2 2 2 2 3 3 3 3 3 3 3 3 3 3 3 3 3 3 3 3 3 3 3 3 3 3 3 3 3 3 3 3 3 3 3 3

Concordo Totalmente 4 4 4 4 4 4 4 4 4 4 4 4 4 4 4 4 4 4 4 4 4 4 4 4 4 4 4 4 4 4 4 4 5 5 5 5 5 5 5 5 5 5 5 5 5 5 5 5 5 5 5 5 5 5 5 5 5 5 5 5 5 5 5 5

R. Cont. Fin. USP So Paulo v. 19 n. 48 p. 65 - 76 setembro/dezembro 2008