Escolar Documentos
Profissional Documentos
Cultura Documentos
Manaus
2021
Diego Prates de Andrade
CESAR School
Mestrado em Design de Artefatos Digitais
Programa de Pós-Graduação
Manaus
2021
Diego Prates de Andrade
Professor
Convidado 1
Professor
Convidado 2
Manaus
2021
Este trabalho é dedicado à todos os profissionais da indústria de desenvolvimento de jogos
digitais, que lutam todos os dias contra o assédio e desumanas horas de trabalho. Não
vamos nos calar!
Agradecimentos
Agradeço a minha orietadora, Prof a Dra Narle da Silva Teixeixa por guiar-me no
caminho desta pesquisa. Agradeço também a minha esposa Andréa Caetano Gouvêa por
toda a paciência e apoio durante estes dois anos de mestrado. E por último mas não menos
importante à todos os participantes integrantes da indústria de desenvolvimento de jogos
digitais que tornaram esta pesquisa possível.
“Torne o seu sonho maravilhoso uma realidade,
ele se tornará a sua verdade. Se alguém pode, é você.
(N, Pokémon Black/White)
Resumo
O desenvolvimento de jogos digitais é uma tarefa complexa e dispendiosa. Para evitar
o gasto de preciosos recursos desenvolvendo um projeto que não agregue ao portfólio
do estúdio, é necessário uma forma de avaliar os projetos ainda em suas fases iniciais.
Nesta pesquisa, foi elaborado um método baseado no processo analítico hierárquico para
classificar estas propostas de projetos e auxiliar os gestores no processo de tomada de
decisão. Colaboraram da pesquisa pelo menos 37 profissionais de desenvolvimento de jogos
no Brasil e no mundo, participando de 2 questionários ministrados online. Como resultado
destes questionários, pôde-se obter um conjunto de critérios e seus respectivos pesos no
ponderamento de uma proposta de jogo digital, assim como a aplicação destes critérios em
um conjunto de propostas e por fim obter uma lista classificada para o auxílio da tomada
de decisão. A aplicação do método construído à partir do processo analítico hierárquico
foi satisfatória, construindo um bom caminho para que estúdios de pequeno e médio porte
possam melhor gerir os seus portfólios de jogos.
1 INTRODUÇÃO . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 17
1.1 Problematização . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 17
1.2 Objetivos . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 19
1.2.1 Objetivo geral . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 19
1.2.2 Objetivos específicos . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 19
1.3 Justificativa . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 19
2 REFERENCIAL TEÓRICO . . . . . . . . . . . . . . . . . . . . . . . 21
2.1 Definição e caracterização de jogos . . . . . . . . . . . . . . . . . . . 21
2.1.1 Indústria de jogos digitais . . . . . . . . . . . . . . . . . . . . . . . . . . . 23
2.2 Métodos de classificação para seleção de portfólio . . . . . . . . . . 24
2.2.1 Métodos comparativos . . . . . . . . . . . . . . . . . . . . . . . . . . . . 24
2.2.2 Métodos de pontuação ou de ranqueamento . . . . . . . . . . . . . . . . . 25
2.2.3 Abordagens de programação matemática . . . . . . . . . . . . . . . . . . 26
2.2.4 Abordagens de emulação cognitiva . . . . . . . . . . . . . . . . . . . . . . 26
2.2.5 Simulações e modelos heurísticos . . . . . . . . . . . . . . . . . . . . . . . 27
2.2.6 Opções reais . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 27
2.2.7 Modelos Ad Hoc . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 27
3 METODOLOGIA . . . . . . . . . . . . . . . . . . . . . . . . . . . . 29
3.1 Caracterização da pesquisa . . . . . . . . . . . . . . . . . . . . . . . . 29
3.2 Procedimentos da pesquisa . . . . . . . . . . . . . . . . . . . . . . . . 29
3.2.1 Levantamento de critérios . . . . . . . . . . . . . . . . . . . . . . . . . . 29
3.2.2 Ponderamento dos critérios . . . . . . . . . . . . . . . . . . . . . . . . . . 30
3.2.3 Aplicação dos critérios de seleção . . . . . . . . . . . . . . . . . . . . . . 37
4 RESULTADOS . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 43
4.1 Análise dos dados . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 43
4.2 AHP enquanto método para seleção de propostas de projetos de
jogos digitais . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 51
5 CONCLUSÃO . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 57
5.1 Resultado . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 57
5.2 Metodologia . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 57
5.3 Trabalhos futuros . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 58
REFERÊNCIAS . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 61
17
1 Introdução
1.1 Problematização
Desde o jogo baseado no filme E.T. - The Extraterrestrial, custando cerca de $22
milhões no ano de 1982 (PHIPPS, 2005), indo até o ano de 2020 onde o jogo Cyberpunk 2077
custou cerca de $330 milhões (MACDONALD, 2020), a história das gigantes da indústria do
entretenimento eletrônico tem um fator comum: o custo elevado do desenvolvimento de seus
produtos. A escolha destes dois jogos para exemplificar o alto custo de desenvolvimento não
foi ao acaso. Ambos, mesmo que por razões diferentes, tiveram uma péssima repercussão
na crítica e pelos consumidores.
Como o custo de produção de um jogo digital tende a ser bastante elevado, é
necessária uma forma de selecionar quais jogos serão produzidos pelo estúdio de desen-
volvimento, visando minimizar a possibilidade de um fracasso comercial. Estúdios de
variados tamanhos costumam iniciar o processo de escolha dos jogos que compõem seu
portfólio através de propostas de desenvolvimento, comumente conhecidas como pitch.
Estas propostas precisam ser avaliadas por um comitê que as classifique em relação ao
que a empresa está buscando em relação ao seu portfólio. De acordo com o tamanho do
estúdio de desenvolvimento, este comité pode ser formado por profissionais experientes
no desenvolvimento de jogos, através de entidades externas para evitar o viés interno da
escolha, além da possibilidade da avaliação pelo próprio presidente da empresa no caso de
estúdios menores ou com uma hierarquia bastante vertical.
É importante salientar que nem todos os projetos de desenvolvimento de jogos
digitais ultrapassam a barreira dos milhões de dólares. Esta faixa de orçamento normal-
mente abrange os jogos comumente conhecidos como AAA e em empresas de grande
porte. A designação AAA refere-se ao padrão de qualidade estabelecido para a indústria,
utilizando o sistema de notas dos Estados Unidos, onde A é a nota mais alta. Em estúdios
de pequeno e médio porte o orçamento costuma ser muito menor, em especial no caso dos
estúdios independentes popularmente conhecidos como indie, que normalmente têm pouco
ou nenhum incentivo financeiro para o seu funcionamento. No cenário de desenvolvimento
independente e estúdios de pequeno a médio porte, há um risco bastante agravado de
passar meses ou até anos trabalhando no desenvolvimento de um produto que pode não
ter uma receptividade positiva pelo mercado.
Este agravamento vem da baixa capacidade de produção destes estúdios, que
normalmente por falta de recursos, trabalham apenas em um título de cada vez, não
permitindo uma diversificação de seu portfólio de produtos. Apesar dos problemas de
gestão de portfólio de um estúdio de desenvolvimento de jogos digitais serem muito
18 Capítulo 1. Introdução
1.2 Objetivos
1.2.1 Objetivo geral
Desenvolver um método de avaliação de projetos de jogos digitais ainda em fase
inicial de desenvolvimento.
1.3 Justificativa
Como visto anteriormente, o processo de criação de jogos digitais costuma envolver
muitos recursos, seja um pequeno time de desenvolvedores independentes que investem seu
tempo fora do trabalho no desenvolvimento de um pequeno projeto, um estúdio que precisa
utilizar o capital de investimento para desenvolver seu próximo jogo, ou uma publicadora
que precisa escolher em qual jogo deve investir o seu orçamento de marketing. Seja qual
for o recurso a ser utilizado, é necessário não somente minimizar o seu uso com estratégias
de gerenciamento, mas talvez até mais importantemente, selecionar onde utilizá-lo.
Com exceção dos jogos hiper casuais (HARTERY, 2020) ou mesmo outros pequenos
jogos para as plataformas móveis, o processo de desenvolvimento de jogos digitais é
comumente longo e a interação com o usuário final costuma se intensificar apenas nas
etapas finais do desenvolvimento (RAMADAN; WIDYANI, 2013). Com isto em mente, é
muito difícil saber no começo de um projeto, e em especial durante a sua fase de proposta,
o quão alinhado com o mercado, e com a habilidade e capacidade da empresa.
Normalmente em estúdios e empresas de grande porte tem pelo menos um setor
dedicado à pesquisa de usuário, análise de dados e adequação de mercado, o processo
de escolha de projetos é baseado nas informações providas por estes setores. Como este
método de avaliação é iterativo tanto em termos de experiências da própria empresa como
em iterações de mercado, estas empresas de grande porte costumam ser mais assertivas
nas escolhas de seus projetos. Além disso, por normalmente contar com um amplo capital
de investimento, podem se dar ao luxo de investir em projetos mais arriscados.
20 Capítulo 1. Introdução
2 Referencial teórico
que é um jogo, de acordo com Costikyan (2013) os jogos são forma de arte interativas,
tornando-a uma definição mais abrangente e incluindo também experiências jogáveis como
os simuladores de caminhada que não se encaixam facilmente na definição mais clássica.
Definição Parlett Abt Huizinga Cailois Suits Crawford Costikyan Avedon / Sutton-Smith
Regras que limitam os jogadores x x x x x x x
Conflito ou competição x x x
Orientado a objetivo ou resultado x x x x x
Atividade, processo ou evento x x x
Involve processo de decisão x x x
Não sério e absorvente x
Nunca associado a ganho material x x
Artificial, seguro, fora da vida ordinária x x x
Cria grupos sociais especiais x
Voluntário x x x
Incerto x
Crível, representativo x x
Ineficiente x
Sistemas de partes/recursos e fichas x x
Uma forma de arte x
3 Metodologia
• Quais critérios são comumente negligenciados pela gerência dos estúdio ou investidores
na seleção de pitches de jogos?
• Qual o seu grau de satisfação em relação a suas experiências prévias com seleção de
propostas de projetos?
lise do primeiro questionário, que será posteriormente explorado na sessão 4.1 Análise dos
dados.
Este questionário foi enviado aos mesmos grupos de discussão sobre desenvolvimento
de jogos digitais do questionário anterior e esteve disponível entre 23/08/2021 e 01/09/2021,
obtendo um total de 37 respostas das quais apenas 27 foram completadas.
Nesta etapa, foi necessário comparar entre si todos os critérios em cada nível
hierárquico, como pode ser visto na figura, ou seja a quantidade de comparações cresce
em uma progressão geométrica
n(n − 1)
c=
2
Onde c é a quantidade de comparações resultantes e n é a quantidade de critérios
a serem comparados. Portanto é vital manter o menor número possível de critérios a
serem comparados, facilitando não somente a sua análise, mas principalmente reduzindo a
quantidade de critérios comparados pelos participantes no questionário (KARTHIKEYAN;
VENKATESAN; CHANDRASEKAR, 2017).
Por tratar-se de um questionário quase que puramente textual, foi necessário aplicar
uma forma de agrupamento e generalização dos dados obtidos. Para isto optou-se pela
utilização de um mapa mental que generalizasse os critérios levantados enquanto mantém
a característica hierárquica do AHP.
Utilizando como exemplo a comparação de frutas prediletas e tendo como base os
dados fictícios:
• Maçã fuji
• Maçã verde
• Banana pacovã
• Banana prata
• Cereja
• Mirtilo
• Amora
linear, sendo que o tempo que o participante gasta analisando e respondendo a pergunta
diminui conforme este progride do questionário, reduzindo a confiabilidade dos dados
obtidos através deste (CHUDOBA, ).
Por último, com o intuito de reduzir ainda mais a quantidade de comparações
realizadas pelos participantes, optou-se por utilizar apenas o primeiro nível hierárquico do
mapa mental.
Todos os pares de comparação foram realizados com a escala padrão do AHP para
o cálculo das matrizes de ponderamento, ou seja: -9 a 9, como pode ser visto da Figura 2.
1
aji =
aij
Este processo de criar a matriz de comparação teve que ser repetido para cada
uma das respostas do questionário, gerando um conjunto de matrizes de comparação
que posteriormente foi utilizado para definir a importância de cada um dos critérios de
avaliação.
Para que se possa gerar os vetores de priorização, ou seja, os pesos de cada um dos
critérios para cada uma das respostas obtidas pelo questionário, é necessário primeiramente
calcular a enésima raiz do produto da matriz, que consiste em multiplicar cada elemento
da linha e elevar o resultado a n1 , onde n é o número de critérios de comparação.
1
(1 × 3 × 5) 3 = 2.47
1
X
(0.33 × 1 × 7) 3 = 1.32 = 4.09
1
(0.2 × 0.14 × 1) = 0.30
3
2.47
P VM açã = = 0.60
4.09
1.32
P VBanana = = 0.32
4.09
0.30
P VF.V erm. = = 0.07
4.09
Cada um destes vetores de prioridade P V multiplicados por 100 são os pesos W
de cada critério de avaliação, que deverão ser utilizados no ranqueamento das propostas
de projetos.
X
= 1 + 0.33 + 0.2 = 1.53
M açã
X
= 3 + 1 + 0.14 = 4.14
Banana
X
= 5 + 7 + 1 = 13
F.V erm.
A soma de cada coluna da matriz é então multiplicada pelo vetor de prioridade
P V correspondente
X
×P VM açã = 1.53 × 0.60 = 0.92
M açã
X
×P VBanana = 4.14 × 0.32 = 1.34
Banana
X
×P VF.V erm. = 13 × 0.07 = 0.96
F.V erm.
O vetor de priorização principal, ou vetor Eigen principal λmax , é então a soma
dos produtos dos vetores de priorização locais previamente calculados.
λmax − n 3.22 − 3
CI = = = 0.11
n−1 3−1
Com o qual é possível finalmente obter a razão de consistência CR
CI
CR =
RI
O índice de consistência randômica é obtido através de uma tabela pré-definida
gerada através uma amostra randomicamente gerada com 500 amostras de matrizes, como
pode ser visto na Tabela 2
n 1 2 3 4 5 6 7 8 9 10
RI 0 0 0.58 0.9 1.12 1.24 1.32 1.41 1.45 1.49
Tabela 2 – Média do índice de consistência randômico de uma amostra de 500 matrizes
(TEKNOMO, 2006)
CI 0.11
CR = = = 0.19 = 19%
RI 0.58
Por padrão, qualquer razão de consistência CR ≤ 10% é considerada consistente,
portanto o exemplo aqui utilizado deveria ser rejeitado ou solicitado ao participante para
que este reveja suas preferências até obter uma razão de consistência aceitável.
3.2. Procedimentos da pesquisa 37
• Qual o mercado?
Cada iteração do evento contava com uma temática específica, para ajudar a guiar
os participantes e ter uma coleção de propostas mais coesa. Também era fornecido aos
participantes informações sobre qual era o público-alvo, sua demografia e em alguns casos
personas para facilitar o direcionamento da proposta. A fim de conservar a confidencialidade
das propostas de projetos, todos os exemplos citados nesta pesquisa são fictícios.
38 Capítulo 3. Metodologia
Cada etapa do cicro de jogabilidade era então descrita em uma lista de funci-
onalidades, como pode ser visto na Figura 6. Cada funcionalidade poderia ou não ter
uma referência, pois caso fosse algo muito inovador, ficaria difícil exemplificar com uma
3.2. Procedimentos da pesquisa 39
referência à outro jogo. Neste caso, os participantes deveriam descrever de forma sucinta
como o jogador deveria interagir com a funcionalidade.
Também é importante saber sobre a sua narrativa, e em alguns casos o enredo base
é essencial para o entendimento da proposta. Portanto uma das sessões obrigatórias da
apresentação era a de narrativa, contendo um enredo principal, como mostrado na Figura
8, além de referências para outros jogos, filmes, etc., como mostrado na Figura 9.
Como o tempo para a elaboração da proposta era bastante curto, também era muito
difícil elaborar qualquer esboço ou protótipo de arte, fazendo com que os participantes
utilizassem também referências de outros jogos, animações, etc. para descrever como o
jogo se pareceria quando implementado, como pode ser visto na figura 9.
Mesmo tendo como seu principal objetivo demonstrar o conceito do jogo, informa-
ções como o elevator pitch, enredo, referências de jogabilidade, narrativa e arte também
40 Capítulo 3. Metodologia
podem ser utilizadas para descrever o segmento de mercado ao qual o jogo deveria ser
direcionado, em especial a demografia dos potenciais consumidores. Como o público-alvo
era estipulado junto ao tema do pitch day, não havia muito espaço de manobra para escolha
de novos públicos por parte dos participantes, mas estes podiam especificar ainda mais o
seu publico. Como pode ser visto na Figura 11, mesmo que não diretamente, informações
como a classificação indicativa, plataformas, gênero e os idiomas nos quais o jogo seria
traduzido, são um bom indicativo do direcionamento do jogo. É importante salientar que,
normalmente ao aumentar a quantidade de idiomas suportados pelo jogo aumenta também
a sua abrangência de mercado. Todavia, alguns jogos, em especial os que tem na narrativa
3.2. Procedimentos da pesquisa 41
escrita um componente muito forte, é complicado traduzi-los para múltiplos idiomas, pois
como a tradução normalmente é realizada por terceiros, muito da qualidade narrativa
pode se perder, podendo tornar-se um problema.
Ainda em relação a ficha informativa mostrada na Figura 11, a quantidade de
jogadores, além de ajudar a firmar o direcionamento do jogo, ajuda também a entender a
complexidade da produção do jogo. Visto que jogos com mais de um jogador, em especial
os online, tendem a ser significativamente mais trabalhosos e podem envolver custos
adicionais com infraestrutura.
Por fim, cada grupo de participantes apresentava sua proposta no dia seguinte ao
pitch day para todo o estúdio, cada apresentação durava até cinco minutos, com até dois
minutos adicionais para perguntas e respostas. O tempo reduzido foi determinado não
somente pelo elevado número de grupos participantes, mas também para manter todas as
propostas sucintas e com um nível semelhante de detalhamento entre si.
Durante a apresentação, um comitê selecionado dentre os integrantes mais experien-
tes do estúdio, avaliava as propostas através de um questionário detalhado contendo vários
critérios de avaliação, agrupados por semelhança. Os avaliadores não puderam avaliar as
propostas das quais tiveram qualquer participação, portando o viés de escolha foi bastante
reduzido.
Cada critério foi descrito na forma de uma pergunta como por exemplo: "A elabora-
ção dos sistemas e mecânicas não apresenta grande dificuldade"e as possíveis repostas eram
colocadas em uma escala Likert padrão: discordo totalmente, discordo mais ou menos, não
concordo nem discordo, concordo mais ou menos e concordo totalmente, como pode ser
visto na Figura 12.
É importante salientar que os dados obtidos através da respostas dos membros
do comitê foram os primeiros a ser obtidos para esta pesquisa, tendo sido coletados no
início do ano de 2020. Por causa disto, os critérios de avaliação utilizados no questionário
enviado aos membros do comitê não utilizam os mesmos critérios de avaliação levantados
no primeiro questionário desta pesquisa. Entretanto os critérios aqui obtidos são de certa
forma bastante genéricos, tendo sido fácil achar uma equivalência entre os dois. Apesar de
42 Capítulo 3. Metodologia
não ser ideal o fato de necessitar de uma equivalência com os critérios desta pesquisa, estes
dados foram obtidos através de uma avaliação real de propostas de projetos, tornando-o
muito mais valiosos do que qualquer simulação que pudesse ser realizada para obtê-los
através de propostas fictícias.
43
4 Resultados
• Habilidade de inovar
• Viabilidade técnica
• Velocidade de desenvolvimento
• Fadiga de mercado
• Qualidade do conteúdo
• Planejamento
• Escopo
4.1. Análise dos dados 45
• Suporte pós-lançamento
Apesar da hipótese levantada pelo autor, os dados indicam que o grau de satisfação
dos respondentes com seleções executadas anteriormente foi bastante alto. Porém, mesmo
não sendo muito muito significativo em termos numéricos, há uma queda na média do na
satisfação quando observamos o grau de experiência dos participantes, como mostrado na
Figura 17.
Com este declínio, além do fato de que a vasta maioria dos respondentes vem de
estúdios de grande porte, com pelo menos 500 desenvolvedores, existe um certo viés em
relação ao grau de satisfação. Como dito anteriormente, o ciclo de desenvolvimento de
jogos AAA costuma ser bastante longo, podendo levar em média de três a cinco anos
até o lançamento. Dito isto, e lembrando que a maior parcela dos participantes tem um
nível de experiência de até 5 anos seguido diretamente pela parcela entre 6 e 10 anos,
a possibilidade destes terem presenciado ou participado de mais de múltiplos processos
4.1. Análise dos dados 47
Por último em relação à demografia deste segundo questionário, foi também so-
licitado aos participantes que indicassem o tamanho do estúdio no qual trabalhavam,
sendo que a grande maioria respondeu trabalhar em estúdios com uma grande quantidade
de pessoas como pode ser visto na Figura 21, indicando uma grande participação de
trabalhadores de estúdios AAA em detrimento à estúdios menores.
4.1. Análise dos dados 49
Entretanto, fica claro que especialidades que costumam ficar mais próximas das
tarefas de produção do jogo em si, como designers, animadores, programadores, etc., tendem
a ter uma razão de consistência CR mais baixa (lembrando que quanto menor a CR, mas
consistente são consideradas as preferências do participante). Enquanto especialidades
como produção e gestão, que normalmente ficam distantes da criação do jogo em si, tendem
a ter uma razão de consistência mais elevada, como pode ser visto na Figura 24.
É importante salientar que apesar de existir uma grande diferença entre os vetores
de cada um dos quartis, os resultados do primeiro quartil (ou seja, os mais consistentes) são
muito parecidos com os das médias tanto simples quanto ponderada de todos os vetores,
podendo indicar que talvez a consistência em si não seja um fator decisivo na seleção de
propostas de projetos de jogos digitais.
Contudo algumas das etapas do método foram simplificadas para que pudessem
ser melhor acomodadas a indústria de jogos.
Começando pela coleta de critérios, o processo analítico hierárquico em si não tem
uma forma explícita de como fazê-la, portando para o método aqui proposto optou-se
por utilizar um questionário com questões descritivas para obter o máximo de informação
possível dos participantes enquanto não adiciona o viés da utilização de uma série de
perguntas utilizando a escala Likert.
Este questionário adiciona uma etapa adicional aos pesquisadores, que caso não
sejam profissionais experientes da área de desenvolvimento de jogos, devem contar com
uma consultoria especializada para a extração e formatação dos critérios à partir das
questões descritivas.
De maneira geral, o processo analítico hierárquico apresenta os critérios de seleção
aos participantes da ponderação como uma lista ou tabela. Visando facilitar o entendimento
dos participantes, a criação de um artefato, no caso um mapa mental, descrevesse a
hierarquia dos critérios obtidos dos participantes de forma muito mais visual do que uma
simples lista.
A primeira mudança em si em relação ao processo analítico hierárquico tradicional
foi o uso apenas do primeiro nível hierárquico durante a etapa de ponderação de critérios.
Esta simplificação visa reduzir drasticamente a quantidade de comparações realizadas no
questionário, possibilitando uma maior adesão de participantes e reduzindo a complexidade
do formulário tanto para o participante em si quanto para a análise dos dados pelos
pesquisadores. Esta simplificação vem em detrimento de uma perda de granularidade
das comparações, mas tendo em vista que o mapa mental obtido na etapa anterior está
presente no questionário de ponderação de critérios, esta perda tende a ser reduzida.
4.2. AHP enquanto método para seleção de propostas de projetos de jogos digitais 53
Outra etapa que não está prevista no processo analítico hierárquico padrão é a
padronização das propostas, visando a facilitação do entendimento das mesmas pelos
avaliadores. No capítulo da metodologia foram exemplificados alguns aspectos que podem
ser padronizados, como a forma de descrever a narrativa e a jogabilidade, mas a padroni-
zação deve ser realizada de acordo com as necessidades e capacidades de cada estúdio de
desenvolvimento.
Na avaliação das propostas, o método analítico hierárquico recomenda comparar
cada critério de cada projeto com os mesmos critérios de todos os outros projetos, ou seja:
se tivermos uma lista de 10 projetos à serem comparados, o critério Conceito de cada
projeto deve ser comparado com o critério Conceito de cada outro projeto, repetindo a
mesma comparação para cada um dos outros critérios. Visando simplificar esta comparação,
adotou-se uma simples escala Likert para cada pergunta do questionário de avaliação, desta
forma os avaliadores não precisam comparar cada projeto com todos os outros, mas sim
dar uma nota para cada um dos critérios em cada projeto, diminuindo significativamente a
quantidade de interações dos avaliadores. Esta simplificação diminui a eficácia do processo
analítico hierárquico, mas torna sua adoção viável em um ambiente onde hajam muitos
projetos à serem analisados.
Os dados do questionário são então compilados em uma planilha onde pode ser
realizada a classificação das propostas, utilizando os pesos dos critérios obtidos através
do processo analítico hierárquico. Visto que para evitar um questionário muito longo no
ponderamento dos critérios não foi solicitado aos participantes que comparassem mais de
um nível hierárquico, cada sub-critério S teve associado a si o peso W proporcional do
critério superior C: ∀S ∈ C, WS = W C
|C|
.
As notas de cada critério são então compiladas à partir da média aritmética das
notas dadas pelos membros do comitê e uma pontuação gerada para cada critério utilizando
seu respectivo peso
Esta planilha é um dos principais artefatos do método descrito nesta pesquisa, e
pode ser vista na Figura 27, sendo basicamente o artefato de saída do processo analítico
hierárquico. Esta lista é o resultado de toda a análise realizada pelo AHP e pode ser
utilizada pela gestão intermediária, para inferir recomendações para os executivos do
estúdio, ou mesmo solicitar uma nova etapa de avaliação caso o resultado obtido seja
inconclusivo, ou mesmo uma nova ponderação de critérios caso seja detectado algum
padrão não esperado.
54 Capítulo 4. Resultados
Este gráfico de bolhas é o artefato final gerado pelo método aqui descrito e é
destinado ao uso dos executivos que podem facilmente ver o posicionamento estratégico
de cada uma das propostas de uma forma visual e de fácil entendimento.
57
5 Conclusão
5.1 Resultado
Assim como em outros setores econômicos, o processo analítico hierárquico mostrou-
se aplicável ao processo de seleção de propostas de jogos digitais. Em especial quando
considera-se a grande quantidade de diferentes fatores que devem ser levados em conside-
ração ao escolher um novo projeto para o portfólio do estúdio.
Todavia, os critérios de avaliação levantados pelos participantes desta pesquisa são
bastante subjetivos e difíceis de medir, como o mercado ao qual o jogo mira, a capacidade
do time de desenvolvimento e o conceito do jogo em si. A subjetividade destes critérios
difere muito dos utilizados em outros setores, onde os critérios são mais sólidos, como o
histórico de ações na bolsa, histórico de rentabilidade, etc. Apesar destes critérios poderem
também ser utilizados na indústria de jogos, estes costumam ter pouco impacto como
fatores decisivos no sucesso de um jogo, portanto não podem ser facilmente aplicáveis a
esta indústria.
Há também o problema de o processo analítico hierárquico ser bastante oneroso em
termos de investimento de tempo para sua realização, aliado à baixa razão de consistência
obtida, tornando-o um fraco candidato a aplicação em estúdios de pequeno porte.
Contudo, o processo é mais facilmente aplicável a estúdios de médio porte, mesmo
sem o auxílio de times de processamentos de dados ou de inteligência de negócios, podendo
ser executado internamente por um time de pesquisa desde que suportados pelos softwares
necessários.
É também muito complexo verificar a eficácia e precisão da classificação em si, visto
que esta somente pode ser averiguada quando o jogo é lançado no mercado, ou em grupos
de foco em suas fases intermediárias e finais de desenvolvimento. Contudo, a aplicação do
processo analítico hierárquico, aliado à um formato padrão das propostas para facilitar
seu entendimento, traz um padrão de avaliação para o estúdio. Este padrão auxilia na
remoção do viés na avaliação e deve ser continuamente revisto a cada iteração, avaliando
se os critérios atuais ainda são relevantes e se os vetores de priorização ainda refletem os
objetivos de negócio do estúdio.
5.2 Metodologia
Apesar de ser possível obter os dados do processo analítico hierárquico através de
um questionário e ferramentas como o Google Forms ou Survey Monkey, fica limitado o
poder de iteração das comparações entre os critérios. Isto fica claro quando verificamos a
58 Capítulo 5. Conclusão
baixa razão de consistência média obtida através do segundo questionário, que poderia
ser melhorada caso o pesquisador tivesse a oportunidade de iterar a comparação junto ao
participante.
Há também o problema do processamento das informações obtidas através do
questionário, apesar de ser possível realizar todos os cálculos necessários em uma planilha
eletrônica, o processo é extremamente oneroso e dificilmente automatizável sem conhe-
cimento de automação como macros e semelhantes. Dito isto, e levando em conta que a
obtenção dos dados em si ainda é um problema, em uma próxima iteração recomenda-se
utilizar uma ferramenta própria para a obtenção e análise de dados para o processo
analítico hierárquico, como o AutoMan ou o HIPRE 3+ (OSSADNIK; LANGE, 1999).
Apesar do uso de um software de auxílio ser altamente recomendado, acredita-se
que manter uma interação próxima entre o pesquisador e o participante seja essencial.
Infelizmente, como esta pesquisa foi realizada durante a pandemia de COVID-19, não
foi possível realizar os questionários pessoalmente, o que certamente dificultou tanto na
explicação da objeto da pesquisa aos participantes, quando na obtenção dos resultados em
si.
Por último, o uso da média para o agregamento dos resultados acaba atuando
como um filtro, eliminando os resultados mais altos e mais baixos. Dito isto, é necessário
encontrar uma forma de melhor agregar os ponderamentos dos critérios de avaliação como
mostrado em (OSSADNIK; SCHINKE; KASPAR, 2016).
Referências
BALDWIN, M. Career Paths in the Game Industry. 2006. Disponível em: <https://www.
gamasutra.com/view/feature/2755/career_paths_in_the_game_industry.php>. Citado
na página 30.
CHENG, J.; CHEN, S. A Fuzzy Delphi and Fuzzy AHP Application for Evaluating Online
Game Selection. International Journal of Education and Management Engineering, v. 2,
n. 5, p. 7–13, 2012. ISSN 23053623. Citado na página 18.
CHUDOBA, B. How much time are respondents willing to spend on your survey?
Disponível em: <https://www.surveymonkey.com/curiosity/survey_completion_times/>.
Citado na página 32.
COSTIKYAN, G. Uncertainty in Games. [S.l.]: MIT Press, 2013. Citado na página 23.
DENNING, P. J.; DEW, N. The myth of the elevator pitch. Communications of the ACM,
v. 55, n. 6, p. 38–40, 2012. ISSN 00010782. Citado na página 38.
HALL, D.; NAUDA, A. An Interactive Approach for Selecting IRD Projects. IEEE
Transactions on Engineering Management, v. 37, n. 2, p. 126–133, 1990. Citado na
página 27.
62 Referências
HORNSHAW, P. The history of Battle Royale: From mod to worldwide phenomenon. 2019.
Disponível em: <https://www.digitaltrends.com/gaming/history-of-battle-royale-games/
>. Citado na página 45.
HWANG, B. N.; PAI, N. Y.; WU, C. H. Fuzzy AHP for determining the key
features and cognitive differences of mobile game development among designer
and game player. Multimedia Tools and Applications, Multimedia Tools and
Applications, v. 76, n. 18, p. 18265–18290, 2017. ISSN 15737721. Disponível em:
<http://dx.doi.org/10.1007/s11042-016-3792-5>. Citado na página 18.
LEE, H.-h. et al. A Study on the Quality Evaluation of Mobile Puzzle Game using AHP.
Journal of Korea Game Society, v. 16, n. 1, p. 43–50, 2016. ISSN 1598-4540. Citado na
página 18.
Referências 63
LO, Y. F.; WEN, M. H. A fuzzy-ahp-based technique for the decision of design feature
selection in massively multiplayer online role-playing game development. Expert Systems
with Applications, Elsevier Ltd, v. 37, n. 12, p. 8685–8693, 2010. ISSN 09574174. Disponível
em: <http://dx.doi.org/10.1016/j.eswa.2010.06.059>. Citado na página 18.
LUEHRMAN, T. Investment Opportunities as Real Options: Getting Started on the Num-
bers. 1998. Disponível em: <https://hbr.org/1998/07/investment-opportunities-as-real-options-getting-
Citado na página 27.
MACDONALD, K. Cyberpunk 2077: Sony pulls game from PlayStation store after
complaints. 2020. Disponível em: <https://www.theguardian.com/games/2020/dec/18/
cyberpunk-2077-sony-pulls-game-from-playstation-store-after-complaints>. Citado na
página 17.
MANSINI, R.; SPERANZA, M. G. Heuristic algorithms for the portfolio selection problem
with minimum transaction lots. European Journal of Operational Research, v. 114, n. 2, p.
219–233, 1999. ISSN 03772217. Citado na página 27.
MARCHAND, A.; HENNIG-THURAU, T. Value creation in the video game industry:
Industry economics, consumer benefits, and research opportunities. Journal of Interactive
Marketing, Elsevier B.V., v. 27, n. 3, p. 141–157, 2013. ISSN 10949968. Disponível em:
<http://dx.doi.org/10.1016/j.intmar.2013.05.001>. Citado na página 23.
MARTINELLI, R.; MILOSEVIC, D. Project Management Toolbox. n. 2nd Edition, p.
25–53, 2016. Citado na página 25.
MARTONČIK, M. E-Sports: Playing just for fun or playing to satisfy life goals? Computers
in Human Behavior, v. 48, p. 208–211, 2015. ISSN 07475632. Citado na página 21.
MASOUMI, R. A framework for project portfolio formation using a hybrid of multicriteria
decision-making methods. Dissertation Abstracts International Section A: Humanities and
Social Sciences, v. 77, n. 1-A(E), 2016. Citado na página 26.
MORADI, N. et al. A Model for Performance Evaluation of Digital Game Industry Using
Integrated AHP and BSC. Journal of Applied Research on Industrial Engineering, v. 5,
n. 2, p. 97–109, 2018. Citado na página 18.
OSSADNIK, W.; LANGE, O. AHP-based evaluation of AHP-Software. v. 118, p. 578–588,
1999. Citado na página 58.
OSSADNIK, W.; SCHINKE, S.; KASPAR, R. H. Group Aggregation Techniques for
Analytic Hierarchy Process and Analytic Network Process: A Comparative Analysis.
Group Decision and Negotiation, Springer Netherlands, v. 25, n. 2, p. 421–457, 2016. ISSN
15729907. Citado na página 58.
PAPAHRISTODOULOU, C.; DOTZAUER, E. Optimal portfolios using linear program-
ming models. Journal of the Operational Research Society, v. 55, n. 11, p. 1169–1177, 2004.
ISSN 01605682. Citado na página 26.
64 Referências
PARK, C.-I.; YANG, H.-S.; YANG, H.-S. Fun Factors by Game Genre. The Journal of the
Korea Contents Association, v. 7, n. 12, p. 20–29, 2007. Disponível em: <http://academic.
naver.com/view.nhn?doc_id=13607125&dir_id=1&field=0&unFold=false&gk_adt=0&sort=
0&qvt=1&query=\protect\begingroup\immediate\write\@unused\def\MessageBreak˙\let\
protect\edefYoumayprovideadefinitionwith\MessageBreak\DeclareUnicodeCharacter\errhelp\
let\def\MessageBreak˙(inputenc)\def\errmessagePackageinputencError:Unicodecharacterìđň(U+
C7AC)\MessageBreaknotsetupforusewithLaTeX.˙˙Seetheinputencpackagedocumentationforexplanation.
˙TypeH<return>forimmediatehelp\endgroup\protect\begingroup\immediate\write\@unused\
def\MessageBreak˙\let\protect\edefYoumayprovideadefinitionwith\MessageBreak\DeclareUnicodeCharacte
errhelp\let\def\MessageBreak˙(inputenc)\def\errmessagePackageinputencError:Unicodecharacterëŕÿ(U+
BBF8)\MessageBreaknotsetupforusewithLaTeX.˙˙Seetheinputencpackagedocumentationforexplanation.
˙TypeH<return>forimmediatehelp\endgroup&gk_qvt=0&citedSearch=false&page.page=
9&ndsCategoryId=10513&library=26>. Citado na página 18.
PHIPPS, K. Interview with Howard Scott Warshaw. 2005. Disponível em: <https://www.
avclub.com/howard-scott-warshaw-1798208406>. Citado na página 17.
RAMADAN, R.; WIDYANI, Y. Game development life cycle guidelines. 2013 International
Conference on Advanced Computer Science and Information Systems, ICACSIS 2013, p.
95–100, 2013. Citado na página 19.
ROSE, M. From Game Jam to the Creation of ’Starlink: Battle for Atlas’. 2018. Disponível
em: <https://gdcvault.com/play/1025130/From-Game-Jam-to-the>. Citado na página
18.
RYU, G.-J.; KWON, H.-I. A Study on Success Factors of Online Game Using AHP.pdf.
Journal of Korea Game Society, v. 7, n. 4, p. 135–145, 2007. Citado na página 18.