Indicadores de Avaliao do Desempenho Porturio: Uma Anlise a Partir da

Literatura Cientfica
Autoria: Ademar Dutra, Vicente Mateo Ripoll-Feliu, Sandra Rolim Ensslin, Leonardo Ensslin,
Emma Teresa Castell Taliani

RESUMO:
Este artigo tem como objetivo proceder uma anlise dos indicadores de desempenho porturio
a partir da literatura cientfica. Trata-se de uma pesquisa exploratria, com abordagem
qualitativa, envolvendo a coleta de dados primrios e secundrios. Como principais resultados
destacam-se: (i) a maioria dos indicadores tem como foco a avaliao da eficincia dos portos
em uma perspectiva operacional; (ii) a maioria dos indicadores no atendem plenamente as
propriedades da Teoria da Mensurao; (iii) a percepo dos gestores quanto contribuio
dos indicadores para o desempenho porturio convergente em termos da quantidade e
divergente quanto ao tipo de indicador.

1. INTRODUO
A avaliao de desempenho possui papel estratgico em todas as reas de gesto de
negcios porque explica a trajetria das organizaes, principalmente quanto e como estas
tm alcanado seus objetivos, alm de fornecer subsdios para o processo de tomada de
deciso. Neste contexto, insere-se a indstria porturia permeada por crescente competio e
constantes demandas dos clientes pela melhoria da qualidade dos servios prestados (WOO;
PETTIT; BERESFORD, 2011; LAM; VOORDEZ, 2011).
Brooks, Schellincky e Pallisz (2011) afirmam que o desempenho de um porto pode ser
avaliado a partir de sua eficincia e eficcia enquanto dimenses complementares, j que a
primeira deve enfatizar o desempenho na perspectiva da autoridade porturia e, a segunda, na
perspectiva dos clientes e de todos os atores envolvidos no ambiente porturio.
Independentemente das dimenses consideradas, Chou e Liang (2001) recomendam aos
gestores a adoo de modelos de avaliao multicritrio, contemplando dimenses objetivas e
subjetivas do desempenho, por permitir uma viso mais abrangente do negcio e tambm
servirem como referncia para potenciais investidores, parceiros e clientes.
Um processo adequado e preciso de avaliao de desempenho de um porto no s
ajuda a entender e melhorar seu marketing e posio competitiva, mas tambm fornece uma
base clara e slida para os formuladores de polticas de desenvolvimento local e regional
(WU; YAN; LIU, 2009). Turner (2000) afirma que um porto deve ser visto como um sistema,
ao invs de um conjunto de terminais e operadores independentes, tendo como foco o
desempenho global do sistema, sempre reconhecendo a contribuio e a interdependncia dos
atores envolvidos no ambiente porturio.
A avaliao do desempenho porturio e sua evoluo a mdio e longo prazos (ALERAQI et al., 2008) requer capacidade de gesto; ou seja, competncia para mobilizar os
recursos e atores envolvidos na busca de melhorias contnuas enquanto processo sistemtico,
permeado em toda a organizao, tendo como guia os objetivos estratgicos, desmembrados
para os nveis ttico e operacional. Isto requer metodologias de avaliao de desempenho,
normalmente propostas por pesquisadores e incorporadas no cotidiano da gesto para apoiar e
subsidiar o processo de tomada de deciso (LIU; XU; ZHAO, 2009; LAM; SONG, 2013).
A avaliao de desempenho deve ser entendida como um processo de gesto, sendo os
indicadores o eixo central para fins de medio do desempenho. Para Tocchetto e Pereira
(2004), os indicadores so medidas utilizadas para avaliar, mostrar a situao e as tendncias
das condies de um dado ambiente ou contexto. Van Bellen (2002) afirma que o objetivo
principal dos indicadores agregar e quantificar informaes que evidenciem as
caractersticas mais importantes de um contexto. Os indicadores organizam e simplificam as
informaes sobre fenmenos complexos tentando melhorar, com isso, o processo de
comunicao e entendimento dos gestores e usurios de tais informaes.
Neste contexto, o presente artigo tem como objetivo proceder uma anlise dos
indicadores de desempenho porturio a partir da literatura cientfica. Como objetivos
especficos destacam-se: (i) selecionar um portflio bibliogrfico que evidencie os
indicadores referenciados na literatura cientfica por meio do instrumento de interveno
ProKnow-C (Knowledge Development ProcessConstructivist); (ii) sistematizar os
indicadores propostos na literatura cientfica e analisar suas principais caractersticas; (iii)
pesquisar junto aos gestores de um porto brasileiro e de um porto espanhol quais indicadores
mais contribuem para o desempenho porturio.
A presente pesquisa justifica-se por sua contribuio comunidade cientfica que
estuda a avaliao de desempenho porturio, pois evidencia e analisa as contribuies da
literatura cientfica referentes ao tema indicador de desempenho, confrontando-as com a
percepo dos gestores porturios. Com isso, permite discutir se as contribuies dos

pesquisadores esto alinhadas com as necessidades dos gestores que atuam no ambiente
porturio.
Este artigo, alm desta seo que trata da introduo, est estruturado da seguinte
forma: a seo 2 aborda o referencial terico; a seo 3 apresenta a metodologia da pesquisa
envolvendo seu enquadramento e a descrio do instrumento de interveno; a seo 4
apresenta os resultados; aps, na seo 5, apresentam-se as consideraes finais e finaliza-se
com o referencial bibliogrfico utilizado no decorrer do estudo.
2. REFERENCIAL TERICO
A literatura cientfica relacionada ao tema indicador de desempenho no apresenta
convergncia nas diferentes denominaes e definies apresentadas pelos pesquisadores da
rea. O que pode ser percebido o uso de diferentes definies, conforme as especificidades
do contexto a que se destinam.
Grnberg (2004), a partir de uma viso genrica, apresenta os indicadores como os
fatores que possuem alto impacto na performance global de uma organizao. Franceschini et
al. (2008), valem-se da Teoria da Representao para afirmar que o conceito de indicador de
desempenho est estritamente relacionado noo de representao alvo. A representao
alvo a operao que almeja tornar um sistema emprico, ou parte deste, tangvel, de tal modo
que permita avaliaes, comparaes, formular predies, tomar decises, dentre outros.
Assim, um indicador de desempenho uma aplicao que, de acordo com a representao
alvo, mapeia as manifestaes empricas nas correspondentes manifestaes simblicas.
Driva, Pawar e Menon (2000), em uma perspectiva de gesto, defendem que os
indicadores so medidas internas que focam na comparao ou evidenciao de atividades,
projetos, programas, processos para prever a dinmica de operao e o alcance das metas
estabelecidas. Seguindo este entendimento, Drongelen, Nixon e Pearson (2000) afirmam que
os indicadores de desempenho so as variveis que indicam a eficcia, efetividade e eficincia
de um processo, sistema, ou parte de um sistema, comparado a um valor de referncia. Neste
sentido, Amaratunga e Baldry (2002) consideram que os indicadores so meios de propiciar a
comparao do processo final com seu incio, uma vez que as medidas de desempenho
provm a base para avaliar o quo bem se est progredindo para alcanar objetivos
preestabelecidos.
Bourne et al. (2000) atestam que os indicadores de desempenho so as medidas que
sustentam a estratgia organizacional. Da mesma forma, Tapinos, Dyson e Meadows (2005)
consideram que so variveis que permitem a constatao se o processo de planejamento
estratgico suporta o alcance das metas organizacionais, efetivo, eficiente e eficaz.
Cram e Shine (2004) inserem-se na perspectiva decisria ao tratar os indicadores de
desempenho como mensuraes feitas para prover os dirigentes com recursos que permitam
apoiar a gesto e subsidiar o processo decisrio. J Leandri (2001) considera que os
indicadores so instrumentos de mensurao que traduzem os julgamentos subjetivos em
mtricas precisas, as quais podem ser armazenadas e analisadas para que seja possvel
monitorar a alterao na performance desejada para a organizao.
A European Environment Agency (2008) parte da premissa que os indicadores so
instrumentos de medida, geralmente quantitativa, que podem ser usados para ilustrar e
comunicar um conjunto de fenmenos complexos de forma mais simples, incluindo suas
tendncias e progressos. Adotando o mesmo entendimento, Bossel (1999) defende que os
indicadores condensam a complexidade em quantidade manejvel de informaes
significativas em um subgrupo de observaes que auxiliam as decises e direcionam as
aes. Ensslin e Ensslin (2009) consideram que os indicadores de desempenho so
instrumentos de gesto utilizados para medir as propriedades do contexto que, na perspectiva
dos gestores (decisores), explicitam seus objetivos.
3

2.1 Tipos de Indicadores

Existem diferentes formas de classificar os indicadores de desempenho. As
denominaes apresentadas neste estudo no so exaustivas, mas se resumem quelas
utilizadas com maior frequncia.
No que se refere perspectiva temporal, os indicadores podem ser Lagging e Leading.
Os indicadores Lagging, para Leandri (2001), medem o reflexo dos objetivos-chave no
resultado final de um processo, e so usados para saber se os mesmos foram alcanados.
Diferentemente, os indicadores Leading so aqueles utilizados para monitorar as atividades;
ou seja, so instrumentos que, ao medir o alcance dos objetivos-chave, demonstram a
evoluo do trabalho (LEANDRI, 2001).
Theppitak (2004) e o Ministrio da Defesa (2006) consideram que, por serem
indicadores que avaliam se as aes e atividades conduziro aos objetivos esperados, so
denominados direcionadores do desempenho (drivers), que permitem avaliar a tendncia e
convergncia das aes em relao aos resultados esperados.
Franceschini et al. (2008) utilizam outra forma para diferenciar os tipos de
indicadores: objetivos (correlacionam objetivamente as manifestaes empricas com as
simblicas) e subjetivos (mapeiam manifestaes empricas em simblicas dependentes de
percepes pessoais).
De forma mais especfica, Chiesa e Frattini (2007) indicam os seguintes tipos de
indicadores: (i) quantitativos objetivos: utilizam mtricas numricas obtidas a partir de
algoritmos, que produzem a mesma avaliao independentemente do responsvel pela
mensurao; (ii) quantitativos subjetivos: empregam mtricas numricas baseadas no
julgamento pessoal de um especialista, cuja avaliao subjetiva traduzida em pontuao
numrica; e (iii) qualitativos subjetivos: so expresses de julgamentos pessoais.
Tangen (2003), Tapinos, Dyson e Meadows (2005) informam que os indicadores
podem estar associados aos nveis decisrios de uma organizao; ou seja, podem ser
operacionais, tticos ou estratgicos, dependendo do tipo de processo ao qual a propriedade a
ser mensurada esteja associada. J Barclay (2002) agrupa os indicadores em internos
(baseados em processos pertencentes a programas) e externos (baseados na organizao como
um todo e nos clientes).
2.2 Propriedades Intrnsecas dos Indicadores
A validade cientfica de um indicador de desempenho est condicionada ao
atendimento de um conjunto de propriedades da Teoria da Mensurao (ENSSLIN;
ENSSLIN, 2009). Este conjunto recebe a denominao de Propriedades Intrnsecas dos
Indicadores de Desempenho, sendo que o atendimento s propriedades intrnsecas assegura
no apenas o atendimento aos fundamentos cientficos dos indicadores, mas, tambm, o
alinhamento ao sistema de valores do decisor.
As propriedades intrnsecas dos indicadores so propostas por Keeney (1992); Ensslin
e Ensslin (2009) com as seguintes denominaes: mensurabilidade, operacionalidade,
legitimidade, inteligibilidade (compreensibilidade) e homogeneidade. A seguir so descritas
cada uma das propriedades.
Mensurabilidade: Um critrio mensurvel quando define o objetivo a ele associado por
meio de indicadores, em mais detalhes do que provido pelo objetivo sozinho. Para que isso
ocorra, aos indicadores devem ser incorporados julgamentos de valor (KEENEY, 1992).
Assim, um indicador que atende a propriedade da mensurabilidade construdo para
quantificar claramente a performance, segundo o sistema de valores de um decisor
(ENSSLIN; MONTIBELLER; NORONHA, 2001). Com isso, sua construo se d em funo
do que o decisor deseja monitorar ou aperfeioar, e no por meio da associao pura do nome
4

do indicador medida a ser realizada (ENSSLIN; ENSSLIN, 2009). Uma vez que a
construo de um Indicador de Desempenho precisa ser baseada em julgamentos de valor,
deve-se ter o cuidado de evitar o uso de conceitos qualitativos para definir seus nveis. O uso
de nveis qualitativos, tais como fraco, bom, muito bom, e excelente resultam com frequncia,
em nveis mal definidos, acarretando ambiguidade para a alocao do desempenho nos nveis
da escala (KEENEY, 1992; ENSSLIN; MONTIBELLER; NORONHA, 2001).
Operacionalidade: A propriedade da operacionalidade indica que a mensurao descrita
atravs do Indicador de Desempenho: (i) fisicamente possvel de realizar (ENSSLIN;
ENSSLIN, 2009); (ii) fornece informaes claramente definidas quanto forma de coletar os
dados e quais devem ser coletados (ENSSLIN; MONTIBELLER; NORONHA, 2001); (iii)
possui uma relao custo/benefcio julgada vantajosa pelo decisor (ENSSLIN;
MONTIBELLER; NORONHA, 2001); (iv) existem, ou podem ser desenvolvidos, meios para
realiz-la (ENSSLIN; ENSSLIN, 2009); (v) permite mensurar um determinado aspecto,
independentemente de qualquer outro aspecto considerado, ou seja, o desempenho de uma
ao potencial em um critrio associvel a um nico nvel de impacto (ENSSLIN;
MONTIBELLER; NORONHA, 2001). O atendimento propriedade da operacionalidade
torna o indicador de desempenho capacitado a fornecer uma base slida para o
desenvolvimento de discusses de performance baseadas nos julgamentos de valor dos
decisores (KEENEY, 1992; ENSSLIN; MONTIBELLER; NORONHA, 2001).
Legitimidade: A legitimidade a propriedade que assegura que o indicador de desempenho
utiliza os valores e preferncias de decisores especficos para contextos igualmente
especficos, e garante a participao ativa do decisor em todas as etapas da construo do
indicador (ENSSLIN et al., 2010). Por meio da participao ativa em todas as etapas,
afirmado que o decisor possa reconhecer que o conhecimento construdo durante todo o
processo de Avaliao de Desempenho esteja alinhado sua percepo de valor sobre o
contexto, o que evita a perda de interesse devido ao modelo de avaliao passar a representar
interesses distintos dos seus (ENSSLIN; MONTIBELLER; NORONHA, 2001). Quando
permitida a participao no processo de construo e gesto dos Indicadores de Desempenho
de outros atores com poder de influncia sobre o contexto, alm do decisor, so criados meios
que favorecem a sinergia, e evita-se que propriedades relevantes ao contexto possam ser
esquecidas durante o processo de construo do modelo de avaliao.
Inteligibilidade (compreensibilidade): Para atender propriedade da Inteligibilidade, o
indicador deve conter informao suficiente que permita a todos os atores envolvidos chegar
mesma mensurao e interpretao (ENSSLIN; ENSSLIN, 2009). Ou seja, no deve haver
perda de informao quando um ator associa determinado nvel de impacto a uma ao
potencial, e outro ator interpreta esta mesma associao (KEENEY, 1992; ENSSLIN;
MONTIBELLER; NORONHA, 2001). Deste modo, o atendimento propriedade da
inteligibilidade faz com que o Indicador de Desempenho permita a descrio e interpretao
da performance, de uma ao potencial, de forma no ambgua por diferentes atores
(KEENEY, 1992).
Homogeneidade: A homogeneidade assegura que, ao realizar a mensurao, sejam medidas
as mesmas propriedades representadas pelo Indicador de Desempenho, e estas propriedades,
estejam em conformidade com os interesses e preferncias dos decisores (ENSSLIN;
ENSSLIN, 2009). Para isso, quando da construo do indicador, deve ser assegurado que cada
indicador mensure uma nica propriedade, assim como cada propriedade selecionada seja
mensurada por um nico indicador (CRAM; SHINE, 2004; FRANCESCHINI et al., 2008).
2.3 Recomendaes prticas para a construo de indicadores

A literatura cientfica sobre indicadores apresenta recomendaes baseadas na prtica

de procedimentos a serem evitados, e outros que se deve enfatizar ao selecionar / construir
Indicadores de Desempenho.
Procedimentos que devem ser evitados: (i) o desejo de medir tudo o que for possvel,
importante ou no, pois desta forma as medidas acabaro competindo entre si e, por fim,
comprometendo sua efetividade (LEANDRI, 2001); (ii) evitar que a medida, em si mesma,
torne-se o foco principal das atenes (LEANDRI, 2001); (iii) medidas selecionadas sem
transparncia e participao dos envolvidos, pois podem causar reao negativa avaliao
(denominada lado obscuro) por medo que os dados do desempenho sejam utilizados em
julgamentos, o que encoraja um comportamento defensivo (NEELY; POWELL, 2004); (iv) a
tendncia para a adoo de medidas que se dizem aplicveis a todas as organizaes, ou a
todas de um mesmo setor (TANGEN, 2003; DENTON, 2005).
Neely et al. (1997), Hudson, Smart e Bourne (2001), Neely, Gregory e Platts (2005)
afirmam que os indicadores devem ser selecionados ao atenderem as seguintes caractersticas:
(i) empregar razes, mais do que nmeros absolutos; (ii) terem metas derivadas da estratgia e
com propsito explcito; (iii) prover feedback rpido, peridico e acurado; (iv) mensurarem
propriedades que possam ser controladas pelos usurios; (v) manterem-se significativos ao
longo do tempo; (vi) serem claramente definidos e objetivos; (vii) terem foco no
aperfeioamento; (viii) serem precisos e relevantes; (ix) possam ser reportados em formato
simples, compreensvel e consistente.
Denton (2005) apresenta duas importantes recomendaes: o reconhecimento da
existncia dos trade-offs entre as medidas, e que as mesmas s so valiosas se forem
consistentes com as necessidades dos usurios. Devido existncia dos trade-offs, ou seja,
impossibilidade de aumentar a performance de apenas um indicador sem impactar em outros,
Garengo, Biazzo e Bititci (2005) defendem que a mensurao do desempenho global deve ser
obtida por meio da integrao de indicadores.
3. PROCEDIMENTOS METODOLGICOS
3.1 Framework da Pesquisa
Quanto ao objeto, a presente pesquisa enquadra-se como exploratria, pois explora um
fragmento da literatura afeta ao tema indicadores de desempenho porturio, visando a seleo
de um portflio bibliogrfico de publicaes relevantes e analis-lo frente literatura
cientfica e percepo dos gestores porturios (GIL, 2008).
A abordagem utilizada neste estudo caracteriza-se como qualitativa (CRESWELL,
2014) por estar fundamentada nas escolhas e preferncias dos pesquisadores, seja na seleo
do portflio bibliogrfico, na anlise dos artigos que o compem, ou na identificao da
percepo dos gestores quanto contribuio dos indicadores para o desempenho porturio.
No que se refere a procedimentos tcnicos, este estudo fez uso da pesquisa
bibliogrfica, da pesquisa-ao e da anlise de contedo (RICHARDSON, 2007). A pesquisa
bibliogrfica decorre da identificao e anlise de artigos publicados em bases de dados
internacionais; a pesquisa-ao decorre da interao dos pesquisadores com o objeto da
pesquisa na operacionalizao do instrumento ProKnow-C, exigindo escolhas e delimitaes
destes; a anlise de contedo decorre do cotejo das caractersticas dos indicadores de
desempenho presentes na literatura com achados na pesquisa bibliogrfica, que exige a leitura
e interpretao crtica dos artigos que integram o Portflio Bibliogrfico.
Quanto coleta de dados, fez-se uso tanto de dados primrios quanto de secundrios.
A etapa de seleo do Portflio Bibliogrfico fez uso de dados primrios, uma vez que as
delimitaes so definias pelos pesquisadores em todas as escolhas demandadas durante o
processo. J nas etapas de anlise dos indicadores so utilizados dados secundrios, uma vez
6

que as caractersticas so buscadas nos artigos do PB e no cotejamento do referencial terico.

A etapa de identificao da percepo dos gestores porturios quanto contribuio dos
indicadores selecionados para o desempenho faz uso de questionrio que foi aplicado ao
gestor de um porto brasileiro e de um porto espanhol. O questionrio fez uso da Escala Likert,
com trs nveis, a saber: 1 - Baixa contribuio; 2 - Mdia contribuio; 3 - Elevada
contribuio. A seleo do PB, por meio do instrumento ProKnow-C ocorreu no ms de
outubro de 2013; a anlise dos indicadores e a aplicao de questionrio, no ms de abril de
2014.
3.2 O Instrumento de Interveno ProKnow-C
A presente pesquisa faz uso do instrumento de interveno denominado ProKnow-C
(Knowledge Development ProcessConstructivist) desenvolvido pelo LabMCDA
(Laboratrio de Metodologias Multicritrio de Apoio Deciso Construtivista) da
Universidade Federal de Santa Catarina (UFSC) Brasil. A disseminao do instrumento
ocorreu por meio de vrias publicaes cientficas em peridicos de lngua inglesa, com
destaque para Azevedo et al. (2013); Lacerda et al.(2011, 2012, 2014); Rosa et al.(2012) e
Tasca et al.(2010), e na lngua nativa dos proponentes do ProKnow-C, com destaque para
Ensslin et al. (2012); Lacerda et al. (2012) e Sartori et al. (2014). O objetivo principal do
ProKnow-C construir conhecimento para determinado pesquisador a partir de seus
interesses, escolhas e delimitaes, segundo uma viso construtivista.
Figura 1: ProKnow-C e suas etapas

Fonte: Adaptado Lacerda, Ensslin, Ensslin (2012) e Tasca et al. (2010).

As etapas do ProKnow-C, representadas na Figura 1, podem ser sintetizadas da
seguinte forma: a etapa 1 Seleo do Portiflio Bibliogrfico visa a identificar, na literatura,
as publicaes cientficas referentes ao tema delimitado pelo pesquisador, e envolve trs
subetapas sequenciais: seleo do banco de artigos bruto; filtragem do banco de artigos; e
realizao do teste de representatividade do Portflio Bibliogrfico PB (LACERDA;
ENSSLIN; ENSSLIN, 2012; ROSA et al., 2011; SATORI et al., 2014); a etapa 2
Bibliometria busca identificar as caratersticas das publicaes da rea de conhecimento em
7

investigao, a fim de gerar conhecimento para o pesquisador por meio da contagem das
ocorrncias de determinada varivel (caracterstica) nas publicaes do PB (ENSSLIN;
ENSSLIN; PACHECO, 2012; ROSA et al., 2011, 2012; LACERDA; ENSSLIN; ENSSLIN,
2012; ENSSLIN et al., 2014); a etapa 3 Anlise Sistmica visa a identificar oportunidades e
lacunas de pesquisa a partir da anlise crtica dos artigos do PB, frente a uma afiliao terica
definida pelo pesquisador (LACERDA; ENSSLIN; ENSSLIN, 2014); e, finalmente, a etapa 4
Pergunta de Pesquisa, o estgio em que o pesquisador gera conhecimento suficiente sobre o
fragmento da literatura / realidade que est investigando, sendo, ento, capaz de identificar
onde e como pretende intervir cientificamente, e justificar tal escolha de forma
fundamentada. Para fins do presente estudo foi aplicada a etapa 1 do instrumento ProKnow-C,
apresentado na Figura 1.
Assim, em linhas gerais, o ProKnow-C informado por uma perspectiva dinmica e
construtivista, que visa, por meio de um processo estruturado, gerao de conhecimento. O
pesquisador o agente principal e por meio de suas reflexes, escolhas e interaes requeridas
pelo instrumento, gera subsdios de forma contnua, ou utiliza-se da recursividade at que
resultados tangveis sejam alcanados. Trata-se de resultados personalizados, decorrentes das
escolhas do pesquisador, mas que permitem replicabilidade, j que envolve um conjunto de
procedimentos previamente estruturados.
Para a aplicao do ProKnow-C, alm da definio do tema central da pesquisa
Avaliao de Desempenho Porturio, os pesquisadores selecionaram as palavras-chaves
por meio de dois eixos, resultando no comando de busca:[("Performance Evaluation or
Performance Assessment or Performance Appraisal or Performance Measurement or
Performance Management) and (Port or harbor or Seaport)]. As bases cientficas
escolhidas para fins da pesquisa foram: EBSCO Academic Search Premier; ProQuest; Isi
Web of Knowledge; Scopus; Science Direct; e Willey Interscience Blackwell. Os
procedimentos de seleo e filtragem dos artigos so demonstrados na Figura 2.
Figura 2: Procedimentos de seleo e filtragem dos artigos

Fonte: Elaborado pelos autores, 2014.

A operacionalizao da primeira etapa do instrumento ProKnow-C resultou em 23
artigos, que passam a ser denominados de artigos do Portflio Bibliogrfico (PB). Concluda
a sntese da etapa de Seleo do Portflio Bibliogrfico do ProKnow-C, passa-se a descrever a
anlise dos resultados.
4. APRESENTAO E ANLISE DOS RESULTADOS
A apresentao e a anlise dos resultados contemplam a sistematizao dos
indicadores de desempenho encontrados nos artigos do PB e a percepo de gestores
porturios quanto contribuio dos indicadores para o desempenho.
4.1 Indicadores originrios do Portflio Bibliogrfico
A anlise de contedo dos 23 artigos que integram o PB, resultante da aplicao do
instrumento de interveno ProKnow-C ,evidenciou um conjunto de dimenses e indicadores
utilizados para a avaliao do desempenho porturio. As dimenses caracterizam-se como
variveis mais abrangentes que agregam vrios indicadores. No processo de anlise dos
artigos constatou-se que os autores utilizam denominaes diversas, tais como variveis,
8

critrios, fatores, dentre outros, para caracterizar os indicadores; ou seja, no existe consenso
na literatura quanto a uma terminologia especfica, no entanto, o termo indicador o mais
utilizado. O Quadro 1 apresenta um recorte da sistematizao das dimenses e dos
indicadores encontrados no PB.
Quadro 1 Recorte dos Indicadores do PB
Autor(es)

Dimenses de
desempenho
H. S. Turner Avaliao de alternativas de Transportadoras
(2000)
poltica porturia: um estudo martimas
de simulao de poltica
leasing de terminal e
Terminais de
desempenho do sistema
contineres
A. S. AlEraqi,
A.
Mustafa, A.
T.
Khader,
C. P. Barros
(2008)
J. Wu, L.
Liang (2009)

Artigo

Eficincia
dos
portos Entradas
martimos do Oriente Mdio
e
do
Leste
africano:
aplicao do DEA utilizando Sadas
anlise de janela

Performances e benchmarks
de portos de container
usando anlise envoltria de
dados (DEA)
S. H. Woo, S. Evoluo do porto e
Pettit, A. K. desempenho na mudana de
C. Beresford ambientes logsticos
(2011)

Entradas
Sadas
Servios
(Externo)

Operao
(Interna)

Logstica

J. C. Q. Dias,
S.
G.
Azevedo, J.
M. Ferreira,
S. F. Palma
(2012)

Comparao de desempenho
porturio por meio da
anlise envoltria de dados:
o caso de terminais de
contineres ibricos

Variveis
Externas
Variveis
internas

Indicadores de Desempenho
Quantidade de chegadas de navio em
determinado tempo; Capacidade do navio;
Terminais alocados por transportadora.
Nmero de terminais de contineres; Tipo de
operao de terminais (dedicado ou de uso
comum); Nmero de guindastes; Taxa de
Manuseio.
Comprimento do ancoradouro; rea de
armazenamento; Manuseio de equipamentos;
Navios atracados.
Movimentao de carga.
Capacidade de movimentao de carga;
Nmero de beros; rea do terminal;
Capacidade de armazenamento.
Movimentao de contineres.
Oportunidade; Confiana; Prazo de execuo
dos servios; Danos de carga; Preciso da
informao; Receptividade; Flexibilidade;
Nmero de reclamaes; Taxas porturias;
Taxa de movimentao de carga; Taxa de
servio; Tarifa de uso das instalaes
porturias.
Produtividade; Produtividade por hectare;
Produtividade por trabalhador; Produtividade
por guindaste; Tempo de espera do navio;
Tempo de trabalho no navio; Tempo de
servio no porto;
- Tempo de carga do navio; Cumprimento do
Regulamento; Nmero de acidente; Nmero
de acidentes com afastamento do trabalho.
Tempo de espera de carga no porto; Tempo de
trabalho na movimentao de carga em
conexo; Cargas com valor agregado de
servio; Valor agregado de servio do porto.
Produto
Interno
Bruto;
Densidade
populacional;
Taxa
de
emprego;
Acessibilidade ao porto.
Dimenso do cais; Nmero de terminais; rea
do porto utilizado para o tratamento de carga;
Equipamentos de movimentao de carga.

Fonte: Elaborado pelos autores, 2014.

A anlise do conjunto de indicadores resultantes do PB evidencia que a maioria dos
indicadores tem como foco a avaliao da eficincia dos portos em uma perspectiva
operacional. Isto pode ser observado em 14 artigos do PB, ou seja, em 61% dos artigos, sendo
predominante o uso da metodologia de avaliao Data Envelopment Analysis (DEA).
Analisou-se, tambm, o tipo de escala utilizada para a medio dos indicadores, se
ordinal ou cardinal, alm da observncia das propriedades da teoria da mensurao. A escala
9

ordinal organiza os nveis de desempenho, indicando a ordem de preferncia dos itens

associados a um indicador, e permite as operaes de contagem, frequncia, moda e mediana
(CHISNALL, 1973), mas no explicita as diferenas de atratividade entre os nveis de
desempenho, que podem ser obtidas por meio de escala cardinal.
A partir do PB constatou-se que 14 artigos (61%) apresentam escalas ordinais para a
mensurao dos nveis de desempenho dos indicadores, 2 artigos (9%) apresentam escalas
cardinais (CHOU; LIANG, 2001; MADEIRA JUNIOR; CARDOSO JUNIOR;
BELDERRAIN; CORREIA; SCHWANZ, 2012), 2 artigos (9%) apresentam escalas Likert
(LIU; XU; ZHAO, 2009; WOO; PETTIT; BERESFORD, 2011) e 5 artigos no especificam
o tipo de escala (LAM; SONG, 2013; SAENGSUPAVANICH; COOWANITWONG;
GALLARDO; LERTSUCHATAVANICH, 2009; DARBRA; RONZA; CASAL;
STOJANOVIC; WOOLDRIDGE, 2004; DOI; TIWARI; ITOH, 2001; GONG; CULLINANE;
FIRTH, 2012).
O indicador de desempenho e suas escalas de mensurao, de acordo com os estudos
de Barzilai (2001) e Lacerda et al (2014), devem atender propriedades especficas da Teoria
da Mensurao para terem respaldo cientfico, quais sejam: (i) mensurabilidade; (ii)
operacionalidade; (iii) legitimidade; (iv) inteligibilidade; e (v) homogeneidade. A anlise do
PB informa que apenas dois artigos atendem plenamente tais propriedades (CHOU; LIANG,
2001; MADEIRA JUNIOR; CARDOSO JUNIOR; BELDERRAIN; CORREIA; SCHWANZ,
2012), enquanto 16 artigos contemplam parcialmente algumas propriedades, e 5 artigos no
contemplam tais propriedades.
4.2 Percepo dos gestores porturios quanto aos indicadores de desempenho
A partir do conjunto de dimenses e indicadores de desempenho sistematizados nos
artigos do PB, procedimento este descrito na seo anterior, os autores desta pesquisa
realizaram uma seleo preliminar das dimenses e dos indicadores que melhor representam o
desempenho de uma unidade porturia; ou seja, aqueles que mais contribuem para expressar o
desempenho porturio. As dimenses e indicadores em duplicidade foram eliminados, e
tambm agrupados em uma mesma denominao aqueles similares ou da mesma natureza.
Esta seleo teve como base o conhecimento e trajetria de pesquisa dos autores sobre o tema
avaliao do desempenho organizacional, considerando, ainda, a ampla utilizao de
metodologias multicritrio na elaborao de modelos de avaliao de desempenho. Esta
seleo preliminar resultou em um conjunto de dimenses (Quadro 2) de indicadores de
desempenho (Quadro 3).
A etapa seguinte consistiu na aplicao de questionrio junto a um gestor porturio da
rea de planejamento de um porto brasileiro, sediado no Estado de Santa Catarina, e de um
porto espanhol sediado na Comunidade Valenciana. Ambos os gestores possuem mais de 15
anos de experincia na rea porturia e nvel de formao correspondente ps-graduao, o
primeiro em nvel de especializao e o segundo em nvel de mestrado.
A primeira indagao do questionrio aplicado visou a identificar quais dimenses
melhor representam o desempenho porturio, conforme apresentado no Quadro 2, a seguir. As
orientaes de preenchimento indicavam que, na coluna Relevncia, os gestores deveriam
registrar com X aquelas consideradas estratgicas para a avaliao do desempenho do porto.
Na coluna Grau de Relevncia, o percentual de 0 a 100% para evidenciar o grau de
importncia em termos comparativos, exclusivamente para as dimenses que foram
selecionadas na coluna anterior. A soma do percentual de todas as dimenses selecionadas
deve atingir 100%. O Quadro 2 apresenta a percepo dos gestores quanto s dimenses para
a avaliao do desempenho porturio.
Quadro 2 Potenciais dimenses para a avaliao do desempenho porturio
10

Dimenses de desempenho
Planejamento e gesto
Qualidade dos servios
Operao e logstica
Servios e novos negcios
Sustentabilidade / Meio ambiente
Econmica e financeira
Capital humano
Segurana no trabalho
Tecnologia da Informao
Planejamento de infraestrutura
Outras_____________________
TOTAL

Gestor porto brasileiro

Relevncia
Grau
de
Relevncia
X
5
X
5
X
35
X
15
X
10
X
5
X
5
X
10
X
5
X
5

Gestor porto espanhol

Relevncia
Grau
de
Relevncia
X
5
X
5
X
15
X
5
X
10
X
15
X
10
X
5
X
15
X
15

100%

100%

Fonte: Elaborado pelos autores, 2014.

Observa-se, no quadro acima, que todas as dimenses apresentadas foram selecionadas
pelos gestores; no entanto, com grau de relevncia divergente, exceto duas das dimenses
relacionadas (Planejamento e gesto, Sustentabilidade / meio ambiente). Para o gestor
brasileiro, as quatro dimenses mais importantes foram Operao e logstica (35%), Servios
e novos negcios (15%), Sustentabilidade / meio ambiente (10%) e Segurana no trabalho
(10%). Para o gestor espanhol foram: Operao e logstica, Econmica e financeira,
Tecnologia da Informao e Planejamento de infraestrutura.
A segunda indagao aos gestores refere-se identificao dos indicadores que mais
contribuem para o desempenho porturio, a partir da seleo efetuada pelos autores, tendo
como base a literatura cientfica. Para o preenchimento do questionrio foi adotada a seguinte
orientao: analise de forma isolada cada indicador e atribua o escore que melhor represente a
contribuio para o desempenho de sua unidade porturia, utilizando os escores 1 - baixa
contribuio no desempenho do porto; 2 - Mdia contribuio no desempenho do porto; 3 Elevada contribuio no desempenho do porto (Escala Likert). Os resultados encontram-se
descritos no Quadro 3.
Quadro 3 Potenciais indicadores de desempenho porturio
Potenciais indicadores de desempenho
ndice de produtividade (toneladas movimentadas)
ndice de rentabilidade
Investimentos em infraestrutura (% faturamento)
Contribuio do porto na movimentao de carga do pas
Participao no PIB regional
Nvel de integrao com a comunidade local (cidade sede)
Uso de ferramentas de gesto
Faturamento do porto
Percentual de superfcie (rea) operada por terceiros
Percentual nas receitas decorrente da concesso a terceiros
Autonomia do porto para fixar tarifas
Sistema de custo utilizado
Custo da folha de pagamento
Faturamento por funcionrio
EBITDA
Rentabilidade sobre ativos
Capacidade de movimentao de cargas
Tempo mdio de carregamento de navios
Tempo mdio de espera dos navios

Gestor porto
brasileiro
Score (1, 2 ou 3)
3
2
3
1
3
2
2
3
1
1
3
3
2
1
3
1
3
3
3

Gestor porto
espanhol
Score (1, 2 ou 3)
3
3
2
1
2
3
1
2
3
2
1
1
1
2
3
3
3
3
3

11

Pontualidade na movimentao de cargas

Percentual da carga movimentada por meio de container
Tempo mdio de permanncia de cargas nas dependncias do porto
Conectividade (rotas)
Plataforma logstica intermodal
Conectividade com outros modos de transporte
Cooperao e trabalho em rede
Plano de gesto ambiental
Certificao ambiental
Certificao / qualidade dos servios internos
Certificao / qualidade dos servios aos clientes
Satisfao dos clientes
ndice de reclamaes
Danos e avarias (relao com o volume de cargas movimentadas)
Tramitao e elaborao de documentos on line (Porto digital)
Negcios prospectados
Captao de novos clientes
Fidelizao de clientes
Prestao de servios de valor agregado
Carga horria mdia de capacitao dos funcionrios
Rotatividade dos gestores (at terceiro nvel hierrquico)
Frequncia de acidentes com afastamento do trabalho
Afastamento em dias decorrentes de acidentes de trabalho

3
1
2
3
3
3
2
3
3
3
3
3
1
2
3
2
3
3
2
3
1
1
1

3
1
2
3
2
3
3
1
1
1
3
3
3
2
3
2
2
2
3
2
3
3
1

Fonte: Elaborado pelos autores, 2014.

Observa-se, no quadro acima que, dos 42 indicadores relacionados, o gestor do porto
brasileiro selecionou 22 com elevada contribuio para o desempenho porturio, enquanto o
gestor espanhol selecionou 20 indicadores; no entanto, somente 11 deles so convergentes. J
em relao alternativa mdia contribuio para o desempenho porturio, o gestor brasileiro
selecionou 9 indicadores, enquanto o gestor espanhol selecionou 12. Assim, constata-se que a
quantidade de indicadores selecionados em cada alternativa so similares, no entanto, existe
baixa coincidncia daqueles selecionados por cada gestor.
Analisando os resultados encontrados a partir dos indicadores sistematizados da
literatura cientfica e da percepo dos gestores quanto ao grau de importncia, pode-se
afirmar que: (i) os pesquisadores da rea de avaliao do desempenho porturio tm optado
pela utilizao de indicadores operacionais em detrimento de indicadores estratgicos; (ii) a
maioria das pesquisas evidenciam o desempenho comparativo de portos de um pas e /ou
regio, sendo incipiente a avaliao do desempenho de forma personalizada; (iii) a ausncia
de indicadores estratgicos na literatura cientfica pode estar associada ao distanciamento dos
pesquisadores em relao ao cotidiano de atuao dos gestores porturios; (iv) a comunidade
cientfica faz uso de indicadores cujas informaes se encontram disponveis em acesso
aberto, ao invs da coleta especfica em cada unidade porturia, o que justifica o uso de
indicadores operacionais; (v) a percepo dos gestores (brasileiro e espanhol) quanto
contribuio dos indicadores para o desempenho porturio convergente em termos da
quantidade de indicadores; no entanto, a divergncia acentuada quanto ao tipo selecionado,
que pode ser explicada pela forma de estruturao e caractersticas do ambiente porturios
vigentes em cada pas.
4. CONCLUSES
O presente estudo teve como objetivo proceder uma anlise dos indicadores de
desempenho porturio a partir da literatura cientfica, tendo como objetivos especficos: (i) a
seleo de um portflio bibliogrfico que evidenciasse os indicadores referenciados na
literatura cientfica por meio do instrumento de interveno ProKnow-C (Knowledge
12

Development ProcessConstructivist); (ii) a sistematizao dos indicadores propostos na

literatura cientfica com a corresponde anlise das principais caractersticas; (iii) a aplicao
de pesquisa junto a gestores de um porto brasileiro e de um porto espanhol, objetivando
identificar quais indicadores mais contribuem para o desempenho porturio.
Com a aplicao do instrumento de interveno ProKnow-C foi possvel selecionar
um PB de 23 artigos com relevncia, reconhecimento cientfico e alinhados com o tema da
pesquisa: avaliao do desempenho porturio. A sistematizao dos indicadores presentes nos
artigos do PB possibilitou identificar as principais caractersticas destes indicadores, mais
especificamente se os mesmos atendem os preceitos da Teoria da Mensurao e o tipo de
escala utilizada para a medio do desempenho escalas ordinais e / ou cardinais.
Adicionalmente foi identificada a percepo dos gestores quanto contribuio dos
indicadores selecionados para o desempenho porturio.
Como resultados destacam-se: (i) a anlise do conjunto de indicadores resultantes do
PB evidencia que a maioria dos indicadores tem como foco a avaliao da eficincia dos
portos em uma perspectiva operacional (61% dos artigos do PB); (ii) a anlise quanto ao tipo
de escala de medio dos nveis de desempenho evidenciou que, em quatorze artigos,
utilizam-se escalas ordinais; em dois deles escalas cardinais; em dois dos trabalhos escalas
Likert e em cinco artigos no especificado o tipo de escala utilizada; (iii) a anlise quanto ao
atendimento das propriedades da Teoria da Mensurao constatou que apenas dois artigos
atendem plenamente tais propriedades, enquanto dezesseis deles contemplam parcialmente
algumas propriedades, e cinco trabalhos no especificam tais propriedades; (iv) a percepo
dos gestores porturios (brasileiro e espanhol) quanto contribuio dos indicadores para o
desempenho porturio convergente em termos da quantidade de indicadores; no entanto, a
divergncia acentuada quanto ao tipo de indicador selecionado, que pode ser explicada pela
forma de estruturao e caractersticas do ambiente porturio vigente em cada pas.
Como principal limitao desta pesquisa, destaca-se a aplicao do questionrio a um
nmero reduzido de gestores porturios. Quanto a contribuies para futuras pesquisas,
recomenda-se: (i) a ampliao das bases de dados para fins de seleo do PB, objetivando
identificar um nmero mais representativo de artigos cientficos; (ii) a identificao da
percepo de um nmero maior de gestores porturios do Brasil e da Espanha; (iii) a
construo de um modelo de avaliao do desempenho porturio a partir do indicadores
selecionados pelos gestores do setor.
AGRADECIMENTO: Os autores da presente pesquisa agradecem o apoio da CAPES para
sua realizao.
REFERENCIAS BIBLIOGRFICAS
AL-ERAQI, A. S.; MUSTAFA, A.; KHADER, A.T.; BARROS, C.P. Efficiency of middle eastern
and East African seaports: Application of DEA using window analysis. European Journal of
Scientific Research 23(4): 597-612, 2008.
AMARATUNGA, D.; BALDRY, D. Moving from performance measurement to performance
management. Facilities, v. 20, n. 5-6, p. 217-223, 2002.
AZEVEDO, R. C.; LACERDA, R. T. O.; ENSSLIN, L.; JUNGLES, A. E.; ENSSLIN, S. R.
Performance Measurement to Aid Decision Making in the Budgeting Process for ApartmentBuilding Construction: Case Study Using MCDA-C. Journal of Construction Engineering and
Management, Vol. 139, No. 2, p. 225 235, 2013.
BARCLAY, I. Organisational factors for success in new product development. In: IEEE
Proceedings: Science, Measurement and Technology, v. 149, n. 2, p. 105-112, 2002.
BARZILAI, J. On the foundations of measurement. IEEE International Conference on Systems,
Man, and Cybernetics, v. 1, p. 401-406, 2001.

13

BOSSEL, H. . Indicators for Sustainable Development: theory, method and applications,

International Institute for Sustainable Development, Winnipeg: Canada, 124 p, 1999.
BOURNE, M.; MILLS, J.; WILCOX, M.; NEELY, A.; PLATTS, K. Designing, Implementing
and updating performance measurement systems. International Journal of Operations &
Production Management, v. 20, n. 7, p. 754-771, 2000.
BROOKS, M. B.; SCHELLINCK, T.; PALLIS, A. A. A systematic approach for evaluating port
effectiveness, Marit. Pol. Mgmt., May, 2011, Vol. 38, No. 3, 315334.
CHIESA, V.; FRATTINI, F. Exploring the differences in performance measurement between
research and development: evidence from a multiple case study. R & D Management, v. 37, p.
283-301, 2007.
CHISNALL, P. Marketing Research: Analysis and Measurement. McGraw-Hill: 1973.
CHOU, T. Y.; LIANG, G. S. Application of a fuzzy multi-criteria decision-making model for
shipping company performance evaluation. Maritime Policy & Management, Vol. 28 No. 4, pp.
375-392, 2001.
CRAM, J.; SHINE, V. Performance measurement as promotion: demonstrating benefit to your
significant others. School Library Association of Queensland Biennial Conference, Gold Coast,
Australia, 29 jun. 1 jul., 2004.
CRESWELL, J. W. Research Design: Qualitative, Quantitative, and Mixed Methods Approaches,
4 th ed. SAGE Publications, Inc., 2014.
DARBRA, R. M., RONZA, A., CASAL, J., STOJANOVIC, T. A. AND WOOLDRIDGE, C. The
Self Diagnosis Method A new methodology to assess environmental management in sea ports.
Marine Pollution Bulletin, Vol. 48 No. 5-6, pp. 420-428, 2004.
DENTON, D. K. . Measuring relevant things. International Journal of Productivity and
Performance Management, v. 54, n. 4, p. 278-287, 2005.
DIAS, J. C. Q., AZEVEDO, S. G., FERREIRA, J. M. AND PALMA, S. F. Seaport performance
comparison using data envelopment analysis: The case of Iberian container terminals.
International Journal of Business Performance Management, Vol. 13 No. 3-4, pp. 426-449, 2012.
DOI, M.; TIWARI, P.; ITOH, H. A computable general equilibrium analysis of efficiency
improvements at Japanese ports. Review of Urban and Regional Development Studies, RURDS
Vol. 13, No. 3, November, 2001.
DRIVA, H.; PAWAR, K. S.; MENON, U. Measuring product development performance in
manufacturing organizations. International Journal of Production Economics, v. 63, n. 2, p. 147159, 2000.
DRONGELEN, I. K.; NIXON, B.; PEARSON, A. Performance measurement in Industrial R&D.
International Journal of Management Reviews, v. 2, n. 2, p. 111-143, 2000.
ENSSLIN L, SCHEID L.C.M, ENSSLIN S.R, LACERDA R.T.O. Software process assessment
and improvement using multicriteria decision aiding-constructivist. JISTEM - Journal of
Information Systems and Technology Management. v. 9, n.3, p. 473-496, 2012.
ENSSLIN, L.; ENSSLIN, S. R.; PACHECO, G. C. Um estudo sobre segurana em estdios de
futebol baseado na anlise bibliomtrica da literatura internacional. Perspectivas em Cincia da
Informao, v. 17, n. 2, p. 71-91, 2012.
ENSSLIN, L.; GIFFHORN, E.; ENSSLIN, S.R.; PETRI, S. M.; VIANNA, W.B. Avaliao do
desempenho de empresas terceirizadas com o uso da metodologia multicritrio de apoio
deciso-construtivista. Pesquisa Operacional, 30, 125-152, 2010.
ENSSLIN, L.; ENSSLIN, S. R.; PINTO, H. M.; Processo de investigao e Anlise bibliomtrica:
Avaliao da Qualidade dos Servios Bancrios. RAC Revista de Administrao
Contempornea; v.17, n. 3, p. 325-349, 2013.
ENSSLIN, L.; ENSSLIN, S. R. Processo de construo de indicadores para a avaliao de
desempenho. In: V Ciclo de debates - Avaliao de Polticas Pblicas, 2009.
ENSSLIN, L.; MONTIBELLER NETO G.; NORONHA S. M. Apoio Deciso. Florianpolis:
Insular; 2001.

14

EUROPEAN
ENVIRONMENT
AGENCY

EEA.
Disponvel
em:
http://glossary.pt.eea.europa.eu/terminology/concept_html?term=indicador
%20de%20desempenho, 2008.
FRANCESCHINI, F.; GALETTO, M.; MAISANO, D.; MASTROGIACOMO, L. Properties of
performance indicators in operations management: A reference framework. International Journal
of Productivity and Performance Management, v. 57, n. 2, n. 137-155, 2008.
GARENGO, P.; BIAZZO, S.; BITITCI, U. S. Performance measurement systems in SMEs: A
review for a research agenda, 252 International Journal of Management Reviews, v. 7, n. 1, p. 2547, 2005.
GIL, A. C. Como elaborar projetos de pesquisa. 4. ed. So Paulo: Atlas, 2008.
GONG, S. X. H.; CULLINANE, K.P.B; FIRTH, M. The impact of airport and seaport
privatization on efficiency and performance: A review of the international evidence and
implications for developing countries, Transport Policy, Vol. 24, pp. 37-47, 2012.
GRNBERG, T. Performance improvement: towards a method for finding and prioritising
potential performance improvement areas in manufacturing operations. International Journal of
Productivity and Performance Management, v. 53, n. 1, p. 52-71, 2004.
HUDSON, M.; SMART, A.; BOURNE, M. Theory and practice in SME performance
measurement systems. International Journal of Operations & Production Management, v. 21, n.
8, p. 1096-1115, 2001.
KEENEY, R. L. Value-focused thinking: a path to creative decision making. Harvard University
Press: London, 1992.
LACERDA, R. T. O.; ENSSLIN, L.; ENSSLIN, S. R. DUTRA, A. A Constructivist Approach to
Manage Business Process as a Dynamic Capability. Knowledge and Process Management., 2014
[no prelo].
LACERDA, R.T.O.; ENSSLIN, L.; ENSSLIN, S. R. Research opportunities in strategic
management field: a performance measurement approach. Int. J. Business Performance
Management, Vol. 15, No. 2, 2014.
LACERDA, R. T. O.; ENSSLIN, L.; ENSSLIN, S. R. A Performance Measurement Framework
in Portfolio Management: A Constructivist Case. Management Decision, v.49, n.4, p.1- 15, 2011.
LACERDA, R. T. O.; ENSSLIN, L.; ENSSLIN, S. R. Uma Anlise Bibliomtrica da Literatura
Sobre Estratgia e Avaliao De Desempenho. Gesto & Produo, v.19, n.1, 2012.
LAM, J. S. L; SONG, D.-W. Seaport network performance measurement in the context of global
freight supply chains. Polish Maritime Research, 20: 47-54, 2013.
LIU, W.; XU, H.; ZHAO, X. Agile service oriented shipping companies in the container terminal.
Transport, 24(2): 143-153, 2009.
LAM, J. S. L.; EDDY VAN DE VOORDEZ, E. V. Scenario analysis for supply chain integration
in container shipping. Marit. Pol. Mgmt., Vol. 38, NO. 7, 705725, 2011.
LEANDRI, S. J. Measures that matter: how to fine-tune your performance measures. The Journal
for Quality and Participation, v. 24, n. 1, p. 39-41, 2001.
MADEIRA JUNIOR, A. G.; CARDOSO JUNIOR, M. M.; BELDERRAIN, M. C. N.; CORREIA,
A. R. SCHWANZ, S. H. Multicriteria and multivariate analysis for port performance evaluation.
International Journal of Production Economics, 140(1): 450-456, 2012.
MINISTRIO DA DEFESA. Indicadores de Desempenho - Sistema de Medio do Desempenho
Organizacional. In: Programa de Excelncia Gerencial Nota de Instruo, 2006.
NEELY, A.; RICHARDS, H.; MILLS, J.; PLATTS, K.; BOURNE, M. Designing performance
measures: a structured approach. International Journal of Operations & Production Management,
v. 17, n. 11, 258 pp. 1131-1152, 1997.
NEELY, A.; GREGORY, M.; PLATTS, K. Performance measurement system design: a literature
review and research agenda. International Journal of Operations & Production Management, v.
15, n. 4, p. 80-116, 1995.
NEELY, A.; POWELL, S. The challenges of performance measurement. Management Decision,
v. 42, n.8, p. 1017-1023, 2004.

15

RICHARDSON, R. Pesquisa social: mtodos e tcnicas. 3 ed. So Paulo: Atlas, 2007.

ROSA, F. S.; ENSSLIN, S.R.; ENSSLIN, L.; LUNKES, R.J. Environmental disclosure
management: a constructivist case. Management Decision, 50, 1117-1136, 2012.
ROSA, F. S. DA; ENSSLIN, S. R.; ENSSLIN, L.; LUNKES, R. J. Gesto da evidenciao
ambiental: um estudo sobre as potencialidades e oportunidades do tema. Engenharia Sanitria
Ambiental, v. 16, n. 1, p. 157-166, 2011.
SAENGSUPAVANICH,
C.;
COMANITWONG,
N.;
GALLARDO,
W.
G.;
LERTSUCHATAVANICH, C. Environmental performance evaluation of an industrial port and
estate: ISO14001, port state control-derived indicators. Journal of Cleaner Production, Vol. 17
No. 2, pp. 154-161, 2009.
SARTORI, S.; ENSSLIN, L.; CAMPOS, L. M. S.; ENSSLIN, S. R. Mapeamento do estado da
arte do tema sustentabilidade ambiental direcionado para a tecnologia de informao,
TransInformao, Vol. 26(1):77-89, 2014.
TANGEN, S. An overview of frequently used performance measures. Work Study, v. 52, n. 7, p.
347-354, 2003.
TAPINOS, E.; DYSON, R. G.; MEADOWS, M. The impact of performance measurement in
strategic planning. International Journal of Productivity and Performance Management, v. 54, n.
5-6, p. 370-384, 2005.
TASCA, J. E.; ENSSLIN, L.; ENSSLIN, S. R.; ALVES, M. B. M. An approach for selecting a
theoretical framework for the evaluation of training programs. Journal of European Industrial
Training, v. 34, n. 7, p. 631-655, 2010.
THEPPITAK, T. Exploring on Performance Measurement System Design and Implementation in
Thai Automotive Industry. Journal of the University of The Thai Chamber of Commerce, v. 24, n.
3, sep-dec., 2004.
TOCCHETTO, M. R. L.; PEREIRA, L. C. Seleo de indicadores ambientais para indstria com
atividade galvnica. In: ENCONTRO DA ASSOCIAO NACIONAL DE PS-GRADUAO
E PESQUISA EM ADMINISTRAO, 28., 2004, Curitiba. Anais... Paran: Anpad, 2004. CDROM.
HUGH S. TURNER, H. S. Evaluating seaport policy alternatives: a simulation study of terminal
leasing policy and system performance, Marit. Pol.Mgmt., Vol. 27, NO. 3, 283 301, 2000.
VAN BELLEN, H. M. Indicadores de desenvolvimento sustentvel um levantamento dos
principais sistemas de avaliao. In: ENCONTRO DA ASSOCIAO NACIONAL DE PSGRADUAO E PESQUISA EM ADMINISTRAO, 26., 2002, Salvador. Anais... Bahia:
Anpad, 2002. CD-ROM.
WOO, S. H.; PETTIT, S.; BERESFORD, C. Port evolution and performance in changing logistics
environments. Maritime Economics and Logistics, 13(3): 250-277, 2011.
WU, J., H. YAN, LIU, J. DEA models for identifying sensitive performance measures in
container port evaluation. Maritime Economics and Logistics, 12(3): 215-236, 2009.
WU, J.; LIANG, L. Performances and benchmarks of container ports using data envelopment
analysis. International Journal of Shipping and Transport Logistics, Vol. 1 No. 3, pp. 295-310,
2009.

16