Você está na página 1de 15

1 | Mtricas em negcios de impacto social

Mtricas
em negcios
de impacto
social
fundamentos
ICE - Instituto de Cidadania Empresarial
MOVE - Avaliao e Estratgia

Quem fez

2 | Mtricas em negcios de impacto social

Misso

Misso

Apoiar clientes a tomar as melhores


decises e desenhar as estratgias mais
relevantes para aumentar o impacto
social de seus investimentos.

Articular lderes transformadores para


o desenvolvimento social.

Causa
Reduo da pobreza compreendida como
um problema multidimensional .

Viso
Organizaes pblicas e privadas fazem
investimentos sociais inteligentes,
melhor compreendem e demonstram
o impacto de suas aes e produzem
resultados sociais relevantes para
a sociedade brasileira.

MOVE
Rua Cardoso de Almeida, 2101
CEP 01251 001 | So Paulo - SP
Fone +55 (11) 3868-4093

ICE - Instituto de Cidadania Empresarial


Rua Padre Manuel de Chaves, 78 Jd. Europa
CEP 01448-050 | So Paulo -SP
Fone +55 (11) 3708-0491

move@movesocial.com.br
www.facebook.com/movesocial
www.movesocial.com.br

ice@ice.org.br
www.ice.org.br

sumrio

3 | Mtricas em negcios de impacto social

04

Introduo

05

Impacto como categoria dos negcios sociais

06

Avaliao do impacto social: definies

07

Mtricas no ciclo de vida de um negcio social

08

Perspectivas sobre as mtricas de negcios de impacto


social presentes na literatura

09

Teorias de mudana e modelos lgicos

11

Desenhos metodolgicos para a avaliao

12

Das ferramentas do campo

14

Recomendaes para o fortalecimento da avaliao


de impacto de negcios sociais

15

Referncias

4 | Mtricas em negcios de impacto social

Mtricas em negcios de impacto social:


fundamentos
por:
Daniel Brando; Clia Cruz; Anna Livia Arida
Palavras-chave:
Negcios sociais, avaliao, impacto, desenhos metodolgicos, tese
de mudana, RCT, IRIS, GIIRS, SROI.

Resumo

Grupo de Estudos
em Mtricas de Negcios
Sociais (GEMNS)

O artigo aborda as referncias de avaliao presentes no emergente campo dos


negcios sociais com nfase na avaliao de impacto, na descrio dos principais
desenhos metodolgicos que podem ser utilizados e na explorao das ferramentas
centrais existentes. Ao final, descreve-se um conjunto objetivo de recomendaes
para fortalecer a avaliao entre os negcios sociais.

Andr Degenszajn (GIFE)


Andr Melman (Consultor Independente)
Anna Livia Arida (MOVE)
Beto Scretas (ICE)

Introduo

Carolina Alves de Jongh (Instituto Votorantim)

Num mundo onde as inovaes sociais tem desafios para serem financiadas, os

Clia Cruz (ICE)

negcios sociais empreendimentos que combinam retorno financeiro com gerao

Daniel Brando (MOVE)

de impacto social por meio de produtos e servios que melhoram a qualidade

Felipe Brito (ICE)

de vida de comunidades de baixa renda vm atraindo ateno. Investidores

Felipe Soares (Instituto Camargo Corra)

privados, fundaes familiares, family funds e mesmo organizaes do terceiro setor

Fernanda Bombardi (ICE)

encontraram no campo dos negcios sociais uma alternativa para o financiamento

Gilberto Ribeiro (VOX Capital)


Graziella Comini (CEATS)
Lilian Okada (Instituto Alana)
Luciana Aguiar (Plano CDE)
Marcus Regueira (First)
Marina Villas Boas (SITAWI)
Maure Pessanha (Artemisia)
Paulo Belloti (Pragma /Mov Investimentos)
Rafael Gioielli (Instituto Votorantim)
Rebeca Rocha (ANDE)
Renato Kiyama (Artemisia)
Rogrio Arns (Instituto Camargo Corra)
Rogrio Renato Silva (MOVE)
Tania Limeira (FGV)
Thas Magalhes (Kalo Taxidi)
Vivianne Naigeborin (Potencia Ventures)

de solues dos problemas pblicos.


Este texto surgiu do debate entre diferentes atores que compem o emergente
ecossistema de finanas sociais e negcios sociais no Brasil. Reunidos para refletir
sobre formas e abordagens de avaliao do impacto de seus investimentos, o Grupo
de Estudos sobre Mtricas de Impacto Social (GEMNS) foi articulado pelo Instituto
de Cidadania Empresarial (ICE), em parceria com a MOVE, e estabeleceu reunies
rotineiras entre 2012 e 2013 durante as quais se debruou sobre artigos, experincias
empricas e troca de vivncias com avaliadores internacionais. A reflexo gerada pelo
grupo provocou anlises e questes pelos quais percorrem as ideias deste artigo.

5 | Mtricas em negcios de impacto social

Impacto como categoria


dos negcios sociais

razo central para elaborar mecanismos que permitam


conhecer os retornos sociais de um negcio social

est associada prpria identidade desse campo. A diferena


entre os negcios tradicionais e os negcios sociais
justamente a associao entre retorno financeiro e impacto
social positivo.

Dois grandes conceitos levam definio de

de distribuio de lucros para os scios.

Conhecer a capacidade de um negcio gerar

negcios sociais, marcados por uma distino

Segundo: outro segmento dos fundos de

impacto social aspecto determinante para

da distribuio dos dividendos. Primeiro: de

investimento de impacto defende que os

a constituio de sua identidade. Para alm

acordo com a proposta de Muhamed Yunnus,

dividendos podem ser remetidos para os

das tradicionais categorias de anlise de um

prmio Nobel da Paz e fundador do Grammen

responsveis pela iniciativa. Entende-se que

portflio de um fundo, que se centram no

Bank, iniciativa pioneira de investimentos

articular apenas uma definio para negcios

retorno e no risco, os negcios sociais

dessa natureza, os negcios sociais devem

sociais no se torna uma barreira para o

incorporam uma terceira dimenso que exige

gerar impacto para populaes de baixa

desenvolvimento desse campo. Entretanto,

ateno e apresentao de resultados: impacto

renda, e excedentes financeiros (dividendos)

importante construir mecanismos capazes de

(Figura 1).

reinvestidos na organizao, sem possibilidade

informar o impacto social gerado.

figura 1 - Categorias de anlise de portflio de negcios sociais.

Nesse sentido, avaliar o impacto do negcio


social deixa de ser uma opo para os
investidores e empreendedores, impondo-se

Retorno

como imperativo para sustentar as propostas


que afirmam ser capazes de gerar lucros e
transformao social. Entretanto, para avanar
nesse debate, importante construir uma clara
definio sobre o significado de impacto, termo
amplamente utilizado, que pode expressar
diferentes concepes de acordo com cada
contexto em que foi empregado.

risco

impacto
Fonte: J.P.Morgan, 2012

6 | Mtricas em negcios de impacto social

Avaliao do impacto social:


definies

valiao do impacto social associa-se ocorrncia de mudanas em uma


comunidade, populao ou territrio a partir da insero de uma varivel

conhecida no sistema (um projeto, programa ou negcio social) em uma


relao causal observada entre a mudana e a varivel. O conceito de impacto
social guarda diferentes definies que se apoiam em atributos metodolgicos,
temporais ou de territrio (Figura 2).

FIgura 2 - Atributos e naturezas da avaliao de impacto social.


Por essa abordagem, atribui-se ao padro ouro (Gold Standard)
de uma avaliao. O assunto controverso e motivo de debates

mudanas
atributos

raro. Aprofundar essa questo no cabe nestas pginas. Mais


adiante sero exploradas algumas questes relacionadas

causa e efeito

impacto

metodolgicos e epistemolgicos em que chegar a um consenso

definio e ao uso de RCTs em avaliaes. Outras definies de


avaliao de impacto, mencionadas a seguir, permitem novas

tempo

exploraes do conceito.
Anlises que medem a mudana lquida (net change) nos

naturezas

territrio

outcomes de um grupo particular de pessoas que podem ser


atribudas a um programa especfico usando as melhores
metodologias disponveis, viveis e apropriadas para responder
pergunta avaliativa investigada e ao contexto especfico

mtodo

(International Initiative for Impact Evaluation 3ie, 2008).


Avaliao que considera todas as intervenes realizadas
dentro de uma determinada rea geogrfica (World Bank

A seguir, so apresentadas algumas definies1 de avaliao de impacto social


para ilustrar as distines.
Avaliaes de impacto procuram responder a questes de causa e efeito. Em
outras palavras, buscam mudanas nos resultados (outcomes) que so diretamente
atribudas ao programa (Gertler et al., 2010, World Bank Training Series).
Avaliaes de impacto comparam os outcomes de um programa contra um
contrafactual que mostra o que teria acontecido com os beneficirios se o programa
no tivesse existido. Distinto de outras formas de avaliao, o estudo de impacto
permite atribuir as mudanas ao programa em avaliao por seguir desenhos
experimentais e quasi-experimentais (World Bank DIME Initiative

Development Impact Evaluation).

Independent Evaluation Group IEG).

A ltima passagem traz uma nova definio de impacto: a rea de

abrangncia da interveno, a ser entendida como territrio de


alcance do projeto, programa ou negcio. Alm de incluir aqui o
territrio no glossrio do impacto, o tempo outra varivel que
se filia s composies do termo. Nessa perspectiva, o impacto
pode ser concebido como um conjunto de resultados que se
manifesta em determinado perodo de tempo aps a interveno
ser encerrada, o que sugere que as avaliaes de impacto devem
ser realizadas em mdio prazo ex-post na expectativa de capturar
evidncias presentes de maneira estvel no sistema.

A definio do Development Impact Evaluation (DIME) apresenta uma

Este estudo no ir advogar uma definio especfica. O essencial

percepo hegemnica entre rgos de natureza econmica e a avaliao de

estimular a compreenso de que concepes distintas convivem

impacto por uma perspectiva metodolgica, implicando a exigncia de utilizar

e se apresentam de diferentes maneiras em diversas audincias.

estudos com grupos controles aleatrios, conhecidos pela sigla em ingls RCTs
(Randomized Control Trials). Dessa forma, somente com a utilizao desses
grupos controles possvel estabelecer uma relao causal probabilstica e
generalizada entre uma interveno e uma mudana na realidade.
1 - Traduo realizada pelos autores deste artigo.

7 | Mtricas em negcios de impacto social

Mtricas no ciclo de vida


de um negcio social

insero de mtricas para avaliar as transformaes sociais geradas

as diferentes etapas deste processo aos dispositivos avaliativos que

por um negcio convida a observar em que momentos a avaliao

podem ser utilizados. O Quadro 1 apresenta essas fases sob o prisma da

pode ser realizada no ciclo do investimento. Um estudo de Harji, K.

avaliao, descrevendo-as e apresentando perguntas-guia que devem

(2013) define as fases do negcio na perspectiva do investidor e associa

orientar cada momento.

Quadro 1 - Mtricas no ciclo do negcio na perspectiva do investidor.

Objetivo

Definio de Valores
do Investidor

Due Diligence

Tese de Mudana

Plano de Avaliao
de Impacto

Monitoramento
de Resultados
Parciais

Avaliao Final

Avaliao
Ex-post

Identificar metas
de impacto e
parmetros para o
investimento.

Selecionar
investimentos
que articulem
retorno risco
e impacto
alinhados ao
portflio.

Com o
investimento
definido,
desenhar sua tese
de mudana com
clara explicitao
de outputs e
outcomes.

Desenho de
estratgias a serem
utilizadas para
conhecer o impacto
do negcio.

Acompanhar
e comunicar
resultados

Avaliar o negcio
ao final do ciclo
de investimento
e comunicar os
resultados

Acompanhar o
impacto aps o
encerramento do
investimento.

Quais desenhos
metodolgicos
sero utilizados
para conhecer o
impacto?

O que est
acontecendo?

Quais os
resultados sociais
gerados?

Qual a
perenidade dos
resultados?

O negcio
de fato capaz
de gerar
transformao
social?

O que se
sustenta depois
de terminado o
investimento?

Definir resultados a
serem alcanados.

Que valores devem


orientar meu
portflio?
Perguntas

Que resultados
pretendemos
alcanar com este
portflio?

Que negcios
Que resultados o
melhor
negcio vai gerar?
respondem ao
desenho do meu Como vai gerar
portflio?
estes
resultados?
Que premissas
existem?

Que informaes
sero coletadas?
Quando?

Que resultados
esto sendo
produzidos?

Fonte: Adaptado do quadro When Investors Use Social Metrics. In: Final Report: Social
Impact Measurement Use Among Canadian Impact Investors. Best, H. & Harji, K., 2013.

Em boa medida, esse Quadro pode ser adaptado para empreendedores,

complexidade para um cenrio j desafiador. O quanto cabe a um

ainda que com ajustes nas perguntas orientadoras, mudando-se

empreendedor investir financeiramente em uma avaliao aspecto

portflio por negcio. Considera-se que, exceo da preocupao com

que ainda exige debate. Acredita-se que essa no sua responsabilidade

a due diliigence, todos os outros movimentos podem compor o ciclo

primria. Se for comparado, por exemplo, a dinmica dos negcios

de avaliao com os quais os empreendedores devem se preocupar.

sociais com o universo dos investimentos a fundos perdidos em que

Entretanto, ainda que os ciclos sejam semelhantes, no cenrio brasileiro,

as organizaes da sociedade civil (OSCs) realizam intervenes para

a questo central parece ser outra. A pergunta fundamental : Quem o

transformao social, observa-se que os recursos para avaliaes de

responsvel pela avaliao: o investidor, o empreendedor ou os dois?.

impacto so majoritariamente aportados por investidores (fundaes,


institutos, cooperao internacional), sendo mais ocasionais e tmidos

A responsabilidade pela avaliao exige investimento tanto de tempo

financiamentos realizados pelas OSCs para avaliao das aes

para modelar as opes mais adequadas, quanto de recursos financeiros.

empreendidas.

Ainda que os recursos alocados para a avaliao tenham consequncias


sobre a rentabilidade do investimento no curto prazo, somente por meio

fundamental que os investidores assumam essa responsabilidade e, ao

desse processo o negcio social ser capaz de sustentar-se como iniciativa

elaborar seus portflios, devem se preocupar com os estudos de impacto

comprovadamente capaz de gerar resultados sociais.

a serem realizados, compondo os recursos necessrios para viabilizar


economicamente essa empreitada.

Para empreendedores que lutam para viabilizar os produtos e


servios de sua startups, a exigncia da avaliao delicada por trazer

8 | Mtricas em negcios de impacto social

Perspectivas sobre as mtricas de negcios


de impacto social presentes na literatura

literatura recente sobre mtricas de negcios sociais

ser generalizada a todo e qualquer negcio, anuncia-se a

tem sido profcua e j apresenta textos marcantes

terceira premissa. Galimi e Olsen (2008) observam que:

produzidos por atores importantes do campo, tal qual


a Rockfeller Foundation (2008) e o J. P. Morgan (2012).
A reviso das produes desses grupos permite observar
a defesa de trs perspectivas que devem guiar os estudos
de impacto de negcios sociais.
A primeira perspectiva aponta que os negcios sociais
devem construir ex-ante sua tese de mudana social
(Theory of Change) para explicitar claramente quais
so as mudanas pretendidas e como elas iro ocorrer.
Por meio dessas teses, um negcio social (ou programa
social) apresenta suas hipteses de transformao social
e permite a empreendedores, aceleradores e investidores
uma viso concreta e objetiva da lgica e da viabilidade
de gerar impacto.
A segunda perspectiva est associada definio
de impacto como mtodo, tal qual j discutido
anteriormente. Afirma-se que, para conhecer o impacto
de um negcio social imperativo o uso de RCTs. A
premissa dura ao enquadrar uma abordagem nica
como capaz de responder a essa questo e, com isso,
ignora aspectos relacionados viabilidade do uso
dessas tcnicas, bem como no explora as qualidades
que outros desenhos metodolgicos podem agregar
a uma avaliao. Essa posio inflexvel corre o risco
de se tornar fundamentalista e perder a sensibilidade
para outros argumentos em situaes que impeam
sua aplicao, como elevado custo, implicao tica
de excluir grupos da interveno para que sirvam de
controle, entre outros.
Um interessante estudo de White, H. e Bamberg, M.
(2007) apresenta um exame das restries prticas
que a aplicao de RCTs encontra no mundo real e
estima que, no campo da cooperao internacional

uma nova relao est emergindo entre pesquisadores e


investidores, na qual os pesquisadores provam por meio
de estudos experimentais quais aes causam impacto, e
os investidores focam em iniciativas que realizam essas
aes em larga escala2.

Essa concepo deixa claro que os negcios no


precisam, necessariamente, realizar seus prprios
estudos com emprego de RCTs, mas sim buscar na
literatura e em pesquisas as teses que comprovam o
impacto de seu negcio. Essa perspectiva adequada
e convida a universidade e outros centros de pesquisas
a realizar estudos que tero aplicaes relevantes para
esse setor. A viabilidade dessa proposta, no entanto,
tem como desafios: (a) a atual inexistncia de pesquisas
para lastrar propostas sobre as solues inovadoras
elaboradas pelos negcios; (b) o dinmico ambiente dos
negcios de impacto social que buscam, a cada instante,
solues inovadoras para problemas crnicos da
sociedade, desafiando o tempo de resposta de pesquisas
que necessitam de tempo considervel para apresentar
concluses precisas; (c) a articulao poltica e tcnica
entre a indstria emergente dos negcios sociais e as
universidades ou centros de pesquisa independentes.
Apesar de o cenrio desenhado por Galimi e Olsen
(2008) ter aroma de idealizao e se apresentar pouco
conectado com o ritmo e a realidade do mercado
de negcios de impacto social, a possibilidade de
estimular pesquisas sobre aes de transformao
social que possam orientar negcios de impacto uma
proposta a ser analisada com cuidado. Com maior
produo cientfica nesse campo, possvel ampliar as
possibilidades de que os negcios sociais sejam eficientes
e gerem verdadeiros benefcios ampla populao.

para o desenvolvimento, apenas 5% dos investimentos


preenchem os requisitos necessrios para a adequada
conduo de grupos controles aleatrios. Cientes de que
a aplicao dessa metodologia encontra problemas para

2 - Traduo livre dos autores deste artigo.

9 | Mtricas em negcios de impacto social

Teorias de mudana e modelos lgicos

teoria de mudana uma abordagem


metodolgica presente principalmente

no campo da avaliao e do planejamento de


investimentos da cooperao internacional e
ganha espao entre os negcios sociais. Essa teoria
busca articular o contexto no qual a iniciativa se
insere, os resultados de longo prazo ou impacto, o
processo que ir gerar as mudanas, as premissas
que devem ser cumpridas ao longo do ciclo do
projeto ou negcio tendo, por fim, uma sntese
figurativa que represente a tese.

As teses de mudana dialogam com a cadeia de valores de um

estiverem disponveis, ento um conjunto de atividades

programa ou negcio social, sendo esse um conceito tributrio

pode ser realizada. Se as atividades forem adequadamente

dos modelos lgicos ou das teorias de mudana lineares. Essa

conduzidas, ento sero gerados produtos (outputs).

cadeia est presente em textos de negcios sociais (Galimi e


Olsen, 2008; Harji, K., 2013) e merece ateno.

Esses produtos podem gerar benefcios para o pblico-alvo,


consolidando-se como resultados alcanados para um conjunto

A seguir, a Figura 3 traz a imagem clssica dessa cadeia que se

de organizaes e comunidades.

estrutura a partir da premissa que, se determinados recursos

Figura 3 - Cadeia de valores de impacto ou teoria linear de mudana.

inputs

>

Recursos necessrios
para operar o programa
ou negcio

atividades
Atividades realizadas

planos

>

outputs
Produtos
Alcance imediato das
atividades

>

outcomes
Resultados
Mudanas geradas no
pblico-alvo Mudana
na vida de indivduos e
famlias

>

impacto
Impacto Estrutural
Mudanas geradas no
sistema social

Resultados esperados
Fonte: Adaptado de Catalog of Approachs to Impact Measurement,
The Rockefeller Foundation, 2008.

10 | Mtricas em negcios de impacto social

s teses de mudana social avanaram para modelos

Uma organizao que tem estimulado e facilitado

bem mais complexos e no lineares, em que as

processos de produo de teses de mudana a

mesmas categorias presentes na Figura 3 se imbricam

ActKnowledge (www.actknowledge.org), baseada em

mutuamente em mltiplas dimenses. Diagramas

Nova York (EUA) e um exemplo de composio dessas

mais ricos so desenhados idealmente em processos

teorias exposto na Figura 4,ilustrada a seguir.

participativos que demandam tempo para construo.

Figura 4 - Exemplo esquemtico de Teoria de mudana em estrutura complexa.

PROJECT SUPERWOMAN: A THEORY OF CHANGE

Instrumento de grande potncia, inegavelmente,


a tese de mudana social, quando elaborada no
incio do empreendimento, deve ser associada
a outras estratgias de avaliao do negcio

Survivors
Attain Coping
Skills

elabora racionalmente uma lgica, explicita

hipteses que podem se tornar realidade caso as


condies idealizadas sejam cumpridas.
pertinente observar que as anlises
Survivors
Experince
and Enact
Appropriate
Workplace
Bahavior

14

proposta original do marco lgico, desenvolvido


participativas sobre o contexto e a lgica da

11

10

interveno social.
Employers Are
Educated as to
How to Use
Interns

12

e agncias de cooperao, mas gradativamente


reduzida a um quadro para guiar a gesto por
resultados dos investimentos. Dessa forma,
mesmo tempo, as construes referenciadas

Women Are
Ready to
Commit and
Attend
Program

Women Hear
about the
Program

A ferramenta foi adotada por diversos fundos

seu potencial analtico foi enfraquecido. Ao

Women Attain
Regular
Child Care

Social service agency, training


program, and nonprofit shelter
provider for survivors of domestic
violence collaborate to develop an
employment program geared to
the particular issues for survivors of
domestic abuse

muito utilizada na gesto de investimentos

na dcada de 1960 para orientar anlises

Women
Enroll in
program

lgico, ferramenta amplamente conhecida e

poltica e diz respeito ao enfraquecimento da

Women
Attend Training
about
Expectations
in the
Workplace

as distines entre essa abordagem e o marco

essa diferenciao. O primeiro tem natureza

13

frequentemente, a necessidade de esclarecer

Vogel (2012) oferece dois argumentos para

Women Attend
Training in
Nontraditional
Skills

sobre teorias de mudana encontram,

de projetos de fundo no reembolsvel.


Women
Serve
Internships

Women
Have New
Support
System

Survivors
Have
Marketable
Skills in
Nontraditional
Areas

Survivors
Know Hot to
Get Help and
Deal with Their
issues

Survivors
Attend
Peer-to-Peer
Counseling

social. A tese em si no garante o impacto, ela

Long-Term
Employment at a
Livable Wage
for Domestic
Violence
Survivors

nesse marco deixaram de realizar ponderaes


consistentes sobre a relao de resultados
de curto prazo, ou produtos, e alcances de
longo prazo. A teoria de mudana vem ocupar
essas lacunas deixadas pelo marco lgico e se
estabelece como um dispositivo preocupado em
entender os aspectos das intervenes sociais

num contexto de complexidade e relaes de

A
1

Fonte: Graig. E, 20103

3 - Usable Knowledge. Disponvel em: <www.usablellc.net/on-logic-models-theories-of-change-and-evaluation>. Acesso em 4 out. 2013.

Intervention
Dominio Effect
(no intervention needed)
Assumptions (see facing page)
Related Interventions
(see facing page)

mltiplas causalidades.

11 | Mtricas em negcios de impacto social

Desenhos metodolgicos
para a avaliao

or meio da metodologia de pesquisa em cincia sociais, desenvolveu-se, ao longo dos anos, um enorme repertrio de desenhos metodolgicos que
podem ser utilizados em avaliaes de impacto, os quais podem ser categorizados em trs famlias:

Desenhos experimentais (nos quais se enquadram os RCTs)

Desenhos quasi-experimentais

Desenhos no experimentais

Os desenhos experimentais e quasi-experimentais so caracterizados

tratamento quanto do grupo controle. Nos desenhos quasi-experimentais,

pelo uso de grupos tratamento, aqueles que participam da interveno, e

essa aleatorizao no realizada. Com relao a modelos no

contrafactuais, grupos de comparao que no participam da interveno

experimentais, o dispositivo do contrafactual no est presente.

e guardam as mesmas caractersticas daqueles que participam e, no

Uma compilao dos desenhos metodolgicos de base quantitativa mais

contexto do estudo, atuam contra o fato. A distino entre desenhos

utilizados em avaliaes de impacto apresentada por Bamberg, M.

experimentais e quasi-experimentais est no fato de que os primeiros

Rugh, J. e Mabry, L. (2012). O Quadro 2 traz uma adaptao da proposta

exigem a designao aleatria das unidades (sorteio), tanto do grupo

dos sete desenhos mais utilizados, segundo os autores.

Quadro 2 - Desenhos quantitativos mais utilizados em avaliao.

Desenho

Antes do projeto

Durante o projeto

Final do projeto

Aps o final
do projeto

T1
C1

T2
C2

T3
C3

T4
C4

T1
C1

T2
C2
T1
C1

T2
C2

T2
C

T2

T1
C

T1
Fonte: Bamberg, M. Rugh, J. e Mabry, L., 2012.

T = Grupo tratamento
C = Grupo controle
interessante observar que o rigor dos desenhos decrescente, sendo o

a pertinncia do foco do estudo. A autora mostra preocupao com a

primeiro o mais robusto e o ltimo o menos. Ao mesmo tempo, no campo

imagem que o mtodo tende a assumir, podendo-se tornar um fim em

do investimento social privado brasileiro, a avaliao de resultados dos

si mesmo e no mais um meio para alcanar respostas a uma pergunta

programas e projetos financiados por empresas em geral demandada

relevante de investigao.

ao final do processo, sendo o desenho nmero 7 o mais utilizado no pas.


Trata-se de uma opo que depende das condies da avaliao (tempo e

Segundo Davidson (2012)4, essencial responder imperfeitamente a uma

recursos disponveis, por exemplo) e no necessariamente de uma escolha

questo importante do que responder perfeitamente a uma pergunta

do avaliador.

pouco relevante. Com isso se estabelece o debate sobre a relao entre o


grau de preciso das dados com a viabilidade do processo e a relevncia

Uma ponderao determinante para a anlise do mtodo de avaliao


a ser adotada foi apresentada por Davidson, J. (2012) ao estabelecer a
relao entre a preciso metodolgica, a viabilidade do processo e

das informaes produzidas.


4 - Seminrio Seminrio A Relevncia da Avaliao para o Investimento Social
Privado, 2012.

12 | Mtricas em negcios de impacto social

Das ferramentas do campo

construo de ferramentas para orientar a

destaque para a taxonomia IRIS e as ferramentas GIIRS

avaliao de impacto de negcios sociais

e SROI, ressaltando-se o estmulo para a adoo de teses

configura-se por duas questes chave: a necessidade

de mudana. A conduo de estudos de caso de natureza

de ter um instrumento objetivo que auxilie o trabalho

qualitativa tambm considerada como mecanismo que

de investidores, aceleradores e empreendedores no

permite entender a complexidade e as particularidades

acompanhamento da performance dos negcios

dos resultados de negcios sociais, mas essa estratgia

associada ao interesse em ter parmetros comuns que

no ser aqui descrita. A seguir, as ferramentas IRIS,

permitem comparar o desempenho das iniciativas. A

GIIRS e SROI sero apresentadas de maneira resumida,

comparabilidade um aspecto crucial a esse campo por

com exceo da teoria de mudana que j foi abordada

permitir observar o desempenho de negcios entre si, de

anteriormente.

carteiras de investimentos (portflio), de setores ou de


territrios geogrficos. Equacionar a comparao no ,

O IRIS nasceu da necessidade de criao de um

entretanto, uma tarefa simples.

conjunto de mtricas comuns a serem compreendidas


de forma alinhada e com potencial de adoo por

O campo das mtricas de impacto de negcios sociais

diversos negcios. Est em desenvolvimento desde

j produziu um expressivo conjunto de ferramentas. A

2008, sendo atualmente liderado pelo Global Impact

compilao realizada por Galimi e Olsen, (2008) traz

Investing Network (GIIN), uma organizao sem fins

20 diferentes instrumentos utilizados para a medio

lucrativos dedicada a aumentar a escala e efetividade dos

do impacto de negcios. Diante dessa diversidade de

investimentos de impacto.

ofertas, as referncias predominantes entre investidores


de impacto e empreendedores so restritas, com amplo

IRIS (Impact Reporting and Investment Standards)


Como catlogo de mtricas, o IRIS opera

A verso 2.2 dessa taxonomia, disponvel

condies para comparar negcios entre si.

tal qual uma taxonomia, com categorias

para download no site da organizao,

No entanto, ainda guarda limitao para

especficas nas quais indicadores so

contabilizava 446 indicadores em agosto de

orientar indicadores relacionados a resultados

apresentados e descritos. Constitui-se de

2103 e segue crescendo por meio do feedback

de mdio prazo (outcomes) e ao impacto social

cinco grupos de indicadores: descrio

realizado a partir a experincia concreta de

dos negcios.

da organizao, descrio do produto,

sua aplicao por fundos e empreendedores

performance financeira, impacto operacional

espalhados pelo globo. Os indicadores

Cabe ressaltar que o IRIS no se configura

e impacto do produto, os quais so tambm

relacionados pelo IRIS so quantificveis e

como ferramenta, mas sim como referencial

relacionados aos setores. Os indicadores

podem ser classificados como referentes a

comum a ser adotado por distintos negcios.

presentes referem-se a cross-sector e podem

produtos (outputs) das intervenes, como,

A resposta instrumental diretamente ligada a

ser aplicados a qualquer rea, bem como os

por exemplo, o nmero de alunos de escolas

esse catlogo o GIIRS.

especficos ligados a educao, agricultura,

ou o de mulheres envolvidas no negcio. Com

energia, servios financeiros, sade, habitao,

isso, esse glossrio avana no alinhamento

estrutura e gua.

de conceitos e indicadores comuns e cria

13 | Mtricas em negcios de impacto social

GIIRS (Global Impact Investing Rating System)

GIIRS uma ferramenta que operacionaliza o uso da taxonomia IRIS em uma plataforma on-line e pode ser utilizada por empreendedores
ou fundos de investimentos. A plataforma vem amadurecendo ano a ano a partir dos retornos dados pelos usurios e comea a tornar-se uma

pea til especialmente para a gesto dos negcios sociais por fundos de investimento de impacto. O GIIRS opera com base em um conjunto de
premissas, como observado por Ribeiro, G. (2012), que remete mesma perspectiva com a qual o mercado financeiro vem regulando standards de
performance de investimento. As premissas so:

Longitudinalidade: capacidade de acompanhar o desempenho ao longo do tempo.

Comparabilidade: permitir comparao.

Verificao independente por terceiro.

Publicao das memrias de clculo, metodologias e definies utilizadas.

Publicao de reports e atualizao de dados com frequncia definida.

Organizao sem fins lucrativos, o GIIRS cobra uma taxa pelo uso de sua plataforma, com valor definido conforme a dimenso do negcio social.
Por meio dessa ferramenta, possvel observar o desempenho do negcio e realizar o benchmarking com outros investimentos, razo pela qual
vem ganhando hegemonia entre os negcios sociais. Como est relacionada taxonomia IRIS, a fora do GIIRS est em informar os avanos
na performance operacional e consolidar os produtos (outputs) referentes mudana social. Entretanto, sua capacidade de anunciar resultados
(outcomes) e impacto restrita.

SROI (Social Return on Investment)


O SROI um mecanismo que possibilita mensurar o impacto social de

e. No sobrepor. Fazer comparaes de performance e

um negcio, processo que lana mo do uso de proxys para a converso

impacto usando standards externos apropriados.

de resultados das atividades em dados financeiros.


Orienta-se pelos seguintes princpios5:

f. Ser transparente. Demonstrar as bases que tornam


as informaes produzidas precisas e honestas. Tal

a. Envolvimento dos stakeholders. Entender a mudana


produzida pela organizao a partir de dilogos com
stakeholders.

demonstrao deve ser reportada e discutida com

stakeholders.
g. Verificar os resultados. Garantir a verificao

b. Entender as mudanas. Conhecer e articular os valores,

independente.

objetivos e stakeholders da organizao para a definio do


que deve ser considerado no SROI.

O processo de aplicao do SROI compreende, de maneira


geral, quatro etapas: (a) definio do escopo de anlise;

c. Valorar o que importa. Uso de proxies financeiras para

(b) identificao de indicadores; (c) atribuio de valor; (d)

os indicadores gerarem valores nos mesmos termos que os

gerao dos valores. Entretanto, ao contrrio do GIIRS, o

usados pelo mercado.

SROI exige um bom grau de investimento da organizao


em profissionais da rea financeira de alta competncia para

d. Incluir apenas o que material. Ter clara concepo e


articulao sobre como as atividades geram mudanas e
avaliar essa dinmica por meio das evidncias recolhidas.

5 - Traduo livre dos autores deste artigo. Fonte: The SROI Network. Disponvel em: <www.thesroinetwork.org/what-is-sroi>. Acesso em 3 out. 2013.

realizar clculos precisos.

14 | Mtricas em negcios de impacto social

Recomendaes para o fortalecimento da


avaliao de impacto de negcios sociais

fortalecimento do emergente campo dos negcios sociais

Os esforos para desenvolver dispositivos adequados para avaliaes

dependente de sua capacidade de demonstrar os impactos que gera

desses negcios no Brasil esto em estgio inicial e, para que ganhem

e, com isso, afirmar sua identidade e seu diferencial em relao a outros

potncia, recomenda-se ateno e esforo aos seguintes aspectos:

tipos de negcios tradicionais.


A. Acompanhar os movimentos internacionais e as

D. Aprendizagem a partir da tecnologia de avaliao

abordagens de avaliao de impacto

do investimento social privado brasileiro

1A. Com o intuito de colaborar com o desenvolvimento de um amplo

Ao longo dos ltimos anos, o investimento social brasileiro vem

dicionrio de definies claras e padronizadas de mtricas de impacto

construindo um consistente repertrio sobre avaliao de impacto.

social e/ou ambiental e financeiro, os atores do ecossistema de negcios

Essa tecnologia produzida em ambientes empresariais, marcados por

sociais podem criar uma ponte com os representantes do IRIS e alimentar

culturas coorporativas, o que tende a se aproximar do contexto nos quais

sua plataforma com informaes adaptadas a realidade brasileira.

muitos negcios sociais esto inseridos. Entende-se que os negcios

2a. De forma semelhante, estimula-se que seja acompanhado o

sociais perpassam por abordagens, metodologias, indicadores e outras

desenvolvimento da plataforma GIIRS e as potenciais implicaes para

questes de avaliao que poderiam se beneficiar de intercmbio com

os negcios sociais brasileiros.

experincias de investidores sociais privados.

B. Construo de teses de mudana social

E. Utilizao da produo acadmica para sustentar


as teses de mudanas

Lderes de fundos de investimento de impacto que atuam com negcios


sociais devem elaborar claramente suas teses de mudana e estimular

quase impossvel que estudos rigorosos sejam realizados por

empreendedores a realizar esforos similares. As teses podem orientar,

investidores ou empreendedores de negcios sociais. As teses de mudana

ainda que teoricamente, a lgica do negcio e as mudanas a serem

dos negcios ganham fora se forem lastradas em produes cientficas

realizadas. Nesse contexto, elas representam hipteses que, em um

que demonstrem as possibilidades de mudanas a partir de determinadas

primeiro momento, vo sustentar o negcio como social.

variveis. Uma articulao cuidadosa entre as hipteses dos negcios


sociais sobre seu impacto e a produo acadmica que respalde tais teses

C. Gerao de espaos de aprendizagem colaborativa

pode definir os negcios que so capazes efetivamente de gerar mudanas


efetivas em prol do desenvolvimento da sociedade.

Mesmo reconhecendo que os negcios esto em ambiente de competio,


a possibilidade de produzir aprendizagens colaborativas por meio do

F. Conduo das avaliaes

intercmbio de teses de mudana, pesquisas setoriais, grupos de estudos


sobre mtricas e similares uma estratgia com grande capacidade de

Negcios sociais devem conduzir avaliaes para estudar o real

agregar conhecimento e experincia para a ao concreta de investidores,

impacto que geram e, com isso, fortalecer sua identidade social, bem

aceleradores e empreendedores.

como gerar informaes teis para orientar ajustes em sua estratgia


e seu posicionamento. Somente com a comprovao das mudanas
sociais efetivas, o campo dos negcios sociais ser capaz de
sustentar sua diferenciao em relao a outros investimentos
e alimentar sua reputao.

15 | Mtricas em negcios de impacto social

Referncias

Bamberger, M. and White, H. Using Strong Evaluation Designs in Developing Countries: Experience and Challenges, Journal of

MultiDisciplinary Evaluation. 2007, Volume 4, Number 8, 58-73.


Bamberg, M., Rugh, J. & Mabry, L. Real Word Evaluation: working under budget, time and data constraints. Sage Publications, 2012.
Best, H. & Harjl, K. Social Impact Measurement Use Among Canadian Impact Investors. Venture Deli e Purpose Capital, 2013.
Davidson, J. Tornar as avaliaes estrategicamente prticas e relevantes. Notas produzidas sobre palestra conduzida no Seminrio Internacional

Relevncia da Avaliao. Anotaes do Seminrio. So Paulo, 2012.


Global Impact Investing Network (GIIN). Disponvel em: <www.thegiin.org>. Acesso em: 3 out. 2013.
GIIRS Ratings & Analytics for impact investing. Disponvel em: <http://giirs.org>. Acesso em: 3 out. 2013.
International Initiative for Impact Evaluation (3ie), Principles for Impact Evaluation. Disponvel em: <www.3ieimpact.org/media/filer/2012/04/20/
principles-for-impact-evaluation.pdf >. Acesso em 3 out. 2013.
IRIS. Disponvel em: <http://iris.thegiin.org>. Acesso em 3 out. 2013.
The Word Bank. Impact Evaluation: The Experience of the Independent Evaluation Group of the World Bank, 2006. Disponvel em: <http://
lnweb90.worldbank.org/oed/oeddoclib.nsf/DocUNIDViewForJavaSearch/35BC420995BF58F8852571E00068C6BD/$file/impact_evaluation.pdf>.
Acesso em: 3 out. 2013.
Gertler, P. Final Report: The Impact of PROGRESA on Health. International Food Policy Research Institute, Washington, D.C., 2000.
Graig, E. On Logic Models Theories of Change and Evaluation. Usable Knowledge, 2010. Disponvel em: <www.usablellc.net/on-logic-modelstheories-of-change-and-evaluation>. Acesso em: 3 out. 2013.
Olsen, S. & Galimidi, B. Catalog f Approaches to Impact Measurement: Assessing Social Impact in Private Ventures. The Rockfeller Foundation, 2008.
Ribeiro, G. Anotaes de aula Avaliao de Impacto de Negcios Sociais. MBA CEATS IP. Nazar Paulista, 2012.
Saltuk, T. A Portfolio Approach to Impact Investment. Global Social Finance Research, J. P. Morgan, 2012.
Vogel, I. UK. Review of the use of Theory of Change in Internactional Development. Departament for International Development (DFID), 2012.

World Bank (n.d.) The Development Impact Evaluation (DIME) Initiative, Project Document, World Bank, Washington, D. C.