Aula 1 - Intensivão de Ciência de Dados

INTRODUÇÃO A CIÊNCIA DE DADOS
Você já passou o seu cartão e recebeu uma mensagem que a

transação não tinha sido aprovada e pensou:
“SERÁ QUE ESTÃO ACHANDO QUE É UMA FRAUDE?”

Você já passou o seu cartão e recebeu uma mensagem que a
transação não tinha sido aprovada e pensou:
“SERÁ QUE ESTÃO ACHANDO QUE É UMA FRAUDE?”
Ou recebeu uma mensagem como essa:

Ou já recebeu uma mensagem como essa do NuBank ao tentar
aumentar seu limite e pensou:
“NOSSA, O NUBANK TÁ ACHANDO QUE SOU MAU PAGADOR?”

Ou já recebeu uma mensagem como essa do NuBank ao tentar
aumentar seu limite e pensou:
“NOSSA, O NUBANK TÁ ACHANDO QUE SOU MAU PAGADOR?”
D O S!
E D A
CI A D
CI Ê N
O É
ISS
Qual a importância de
Ciência de Dados?
Ciência de Dados?
Mas como isso vai trazer

lucro pra empresa?
o t e n c i al
r t o d o o p
t e m
Ciência de Dados?
o s t ra s !
E u q u e r o a d e D a d o
m C i ê n ci
x i s t e e Mas como isso vai trazer
que e
lucro pra empresa?
O que tem por trás dessas mensagens?
ANÁLISE HISTÓRICA DO
MEU COMPORTAMENTO
MEU COMPORTAMENTO
- Valor médio da compra

- Horário de compra
- Histórico de pagamentos
- Uso do limite do cartão
- Locais frequentes de compra
- Local da compra atual
- Histórico do local da compra
ANÁLISE HISTÓRICA DO MODELO DE

MEU COMPORTAMENTO IDENTIFICAÇÃO DE FRAUDE

- Essa transação que eu estou fazendo agora pode ser uma fraude?
- Existe risco em aumentar o meu limite do cartão de crédito?

- Essa transação que eu estou fazendo agora pode ser uma fraude?
- Existe risco em aumentar o meu limite do cartão de crédito?
ANÁLISE HISTÓRICA DO MODELO DE ANÁLISE DA TRANSAÇÃO

MEU COMPORTAMENTO IDENTIFICAÇÃO DE FRAUDE ATUAL

- Uso atual do limite

- Horário da compra
- Valor
- Local

segundos

PROCESSANDO
segundos

segundos
TUDO ISSO É CIÊNCIA DE DADOS!

segundos

segundos

segundos
ADICIONANDO
NOVOS DADOS FEEDBACK
HISTÓRICOS
1 ou 2

l i c a r
ATUAL
so ap
o p o s l h o ?
c o m t rab a
Ma s m e u
s o n o
i s segundos
ADICIONANDO
NOVOS DADOS FEEDBACK
HISTÓRICOS
1 ou 2
Onde usamos Ciência de Dados?
IDENTIFICAÇÃO DE
FRAUDE
MEU COMPORTAMENTO
IDENTIFICAÇÃO DE
FRAUDE
MEU COMPORTAMENTO
PREVER DESEJO
DE COMPRA
IDENTIFICAÇÃO DE
FRAUDE
MEU COMPORTAMENTO
PREVER DESEJO
DE COMPRA
PREVISÃO DE CHURN
(SAÍDA DO CLIENTE)
IDENTIFICAÇÃO DE
FRAUDE
MEU COMPORTAMENTO
PREVER DESEJO
DE COMPRA
PREVISÃO DE CHURN
(SAÍDA DO CLIENTE)
AUMENTO DA
SATISFAÇÃO DO CLIENTE
APROVAÇÃO ANÁLISE DE
DE CRÉDITO FRAUDE
APROVAÇÃO SUGESTÃO ANÁLISE DE

DE CRÉDITO DE PRODUTO FRAUDE
APROVAÇÃO SUGESTÃO ANÁLISE DE DEFINIÇÃO

DE CRÉDITO DE PRODUTO FRAUDE DE ROTAS
APROVAÇÃO SUGESTÃO ANÁLISE DE DEFINIÇÃO ANÁLISE DE

DE CRÉDITO DE PRODUTO FRAUDE DE ROTAS SENTIMENTOS
ANÁLISE DE
SENTIMENTOS
PROBLEMA NA ENTREGA ATENDIMENTO RUIM
ANÁLISE DE
SENTIMENTOS
PROBLEMA NA ENTREGA ATENDIMENTO RUIM
ANÁLISE DE
SENTIMENTOS
RAIVA
DECEPÇÃO
APROVAÇÃO SUGESTÃO ANÁLISE DE DEFINIÇÃO ANÁLISE DE

DE CRÉDITO DE PRODUTO FRAUDE DE ROTAS SENTIMENTOS
Aprovação de crédito
Identificação de fraude
Definição de rota
Análise de inadimplência
Análise de churn
Identificação de falhas
Promoção personalizada
Definição de rota
Análise de inadimplência
Análise de churn
Definição de rota Identificação
Análise de inadimplência de erros no IR
Análise de churn
Análise de churn
Identificação de falhas Oportunidades de
investimentos
Análise de churn
Identificação de falhas Oportunidades de
investimentos
Nós estamos diariamente sendo influenciados pela Ciência de Dados!
Instagram: feed, reels, explorar,...

“ah, o algoritmo do Instagram...”
Instagram
Netflix: indicação de
filmes / séries
Carros autônomos
Carros autônomos
Carros autônomos
Você está ajudando no

treinamento de carros
autônomos!
Carros autônomos
E empresas enormes tem usado cada vez mais a Ciência de Dados
para se destacar no mercado!
A grande briga entre o Tiktok e o

Instagram envolve Ciência de
Dados para conseguir te entregar
o melhor conteúdo e te manter
mais tempo na Plataforma!
A grande briga entre o Tiktok e o O Walmart usou Ciência de

Instagram envolve Ciência de Dados e conseguiu aumentar em
Dados para conseguir te entregar 7 vezes a venda desse item em
o melhor conteúdo e te manter períodos próximos a furacões
A grande briga entre o Tiktok e o O Walmart usou Ciência de Os anúncios super

Instagram envolve Ciência de Dados e conseguiu aumentar em personalizados que você recebe
Dados para conseguir te entregar 7 vezes a venda desse item em no celular só são possíveis
o melhor conteúdo e te manter períodos próximos a furacões devido a Ciência de Dados
D O S!
E D A
CI A D
CI Ê N
SSO É
D O I
TU
A grande briga entre o Tiktok e o O Walmart usou Ciência de Os anúncios super
Instagram envolve Ciência de Dados e conseguiu aumentar em personalizados que você recebe
Dados para conseguir te entregar 7 vezes a venda desse item em no celular só são possíveis
o melhor conteúdo e te manter períodos próximos a furacões devido a Ciência de Dados
“Tá bom Lucas, se as empresas ganham milhões com
Ciência de Dados, quanto elas pagam pros funcionários?”
Quanto vale uma melhoria de 10% em um algoritmo de recomendação?
Quanto vale uma melhoria de 10% em um algoritmo de recomendação?
Para a Netflix,
1 milhão de dólares
Além disso, as empresas estão dispostas a pagar bons salários
- Falta de profissionais qualificados
- Potencial que Ciência de Dados tem para

a empresa!
MÉDIA
FAIXA
MÉDIA SALARIAL
Depois de tudo isso que eu falei até agora,
você acha que vale a pena aprender Ciência de Dados?
COLOCA NOS COMENTÁRIOS

Existe um método científico!
Observação, hipóteses, testes e
validação, análises, monitoramento.
Ciência de
Dados
Precisamos que existam dados armazenados (ou
pelo menos começar esse armazenamento).
Armazenamento, processamento, visualização.
Ciência de
Dados
Ciência de
Dados
Ciência de
Dados
INTRODUÇÃO A CIÊNCIA DE DADOS Observação
Existe um método científico! Hipóteses

Ciência de Experimento
Dados
Análise / Resultados
Conclusão

Dados
Conclusão

Dados
Conclusão
Tecnologia /
Negócios
Automações
Ciência de
Dados
Matemática /
Estatística
Tecnologia /
Negócios
Automações
Data Science
Matemática /
Estatística
Tecnologia / Softwares tradicionais

(excel, SAS, etc) Negócios
Automações
Data Science
Machine Learning Soma, media,

estatística tradicional
Matemática /
Estatística
Softwares tradicionais
(excel, SAS, etc)

(excel, SAS, etc)
O tamanho da base pode

tornar a análise inviável
Conclusões que estão corretas mas

estatisticamente tem pouca validade
(excel, SAS, etc)
Cidade Temp Média

Cidade 1 30,5
Cidade 2 31,3
Conclusões que estão corretas mas

estatisticamente tem pouca validade
(excel, SAS, etc)
Cidade Temp Média

Cidade 1 30,5
Cidade 2 31,3
Temperatura Média estatística tradicional
45
40 Cidade 2
35
30
25
Cidade 1
20
15
10
5
0
Jan Fev Mar Abr Mai Jun Jul Ago Set Out Nov Dez
(excel, SAS, etc)
Decisões que não fazem

sentido para o negócio
Canal Retorno do Investimento
TV 0,8
Jornal 1,1
Blogs / Sites 2,7
Orkut 5,3
A empresa deve usar o Orkut como principal

investimento para ações de marketing em 2022
Tecnologia / Softwares tradicionais

(excel, SAS, etc) Negócios
Automações
Data Science

Matemática /
Estatística
CRISP-DM (CRoss Industry Standard Process for Data Mining)
Entendimento
do negócio
Preparação / Entendimento
Visualização dos dados
Preparação
Validação
dos dados
Análise /
Modelagem
Entendimento
do negócio
Definição do Alinhamento de
problema expectativas
Preparação
Validação
dos dados
Análise /
Modelagem
Entendimento
do negócio
Engenharia
de dados
Preparação
Validação
dos dados
Análise /
Modelagem
Entendimento
do negócio
Análise Tratamento Definição do

Exploratória dos dados modelo
Preparação
Validação
dos dados
Análise /
Modelagem
Entendimento
do negócio
Análise Tratamento Engenharia

Exploratória dos dados de dados
Preparação
Validação
dos dados
Análise /
Modelagem
Entendimento
do negócio
Análise Tratamento Definição do

Exploratória dos dados modelo
Preparação
Validação
dos dados
Análise /
Modelagem
Entendimento
do negócio
Preparação
Validação
dos dados
Análise /
Modelagem
Entendimento
do negócio
Preparação
Validação
dos dados
Análise /
Modelagem
Entendimento
do negócio
Implementação
Preparação
Validação
dos dados
Análise /
Modelagem
Entendimento
do negócio
Melhoria
contínua
Monitoramento
e ajustes Preparação
Validação
dos dados
Análise /
Modelagem
NOSSO PROCESSO DE CIÊNCIA DE DADOS
Definição do problema
Implementação Alinhamento de
expectativas
Melhoria
Apresentação contínua Entendimento
do resultado dos dados
Validação do Engenharia
modelo de dados
Monitoramento
e ajustes
Definição do Preparação
modelo dos dados
Tratamento dos dados Análise Exploratória

INTELIGÊNCIA ARTIFICIAL E APRENDIZADO DE MÁQUINAS
Ciência de Dados é Inteligência Artificial?
Inteligência Artificial: permitir que as máquinas

resolvam uma tarefa assim como um humano faria
(como aprendizado, reconhecimento de imagem,
otimização, robôs,...)
Inteligência Artificial: permitir que as máquinas

resolvam uma tarefa assim como um humano faria
(como aprendizado, reconhecimento de imagem,
otimização, robôs,...)
Machine Learning: o aprendizado

será feito através de métodos
estatísticos a partir de uma grande
base de dados
Inteligência Artificial: permitir que as máquinas Planejamento e

resolvam uma tarefa assim como um humano faria Otimização
(como aprendizado, reconhecimento de imagem, ...
otimização, robôs,...) Sistemas
Especialistas
Processamento de Reconhecimento Machine Learning: o aprendizado

Linguagem Natural de fala será feito através de métodos
estatísticos a partir de uma grande
Visão base de dados
Automações
computacional
O APRENDIZADO DE MÁQUINAS
O que é o Aprendizado de Máquinas?
“Field of study that gives computers the ability to learn without being explicitly programmed”
“É o campo de estudo que dá aos computadores a capacidade

de aprender sem serem explicitamentes programados”
“Field of study that gives computers the ability to learn without being explicitly programmed”
“É o campo de estudo que dá aos computadores a capacidade

de aprender sem serem explicitamentes programados”
“Tá, mas o que isso quer dizer?

PROGRAMADO
MOSTRAR SALDO
PROGRAMAÇÃO TRADICIONAL
SALDO
FAZER TRANSAÇÃO
FAZER
PIX
PROGRAMADO
MOSTRAR SALDO
SALDO
FAZER TRANSAÇÃO
FAZER
PIX
PROGRAMADO
MOSTRAR SALDO
SALDO
FAZER TRANSAÇÃO
FAZER
PIX
PROGRAMADO
NÃO
VERIFICAR
TRANSAÇÃO
PROGRAMADO
MOSTRAR SALDO
SALDO
FAZER TRANSAÇÃO
FAZER
PIX
PROGRAMADO
NÃO
VERIFICAR ERRO!
TRANSAÇÃO
MACHINE LEARNING
MACHINE LEARNING
ACERTOU
MACHINE LEARNING
ERROU
MACHINE LEARNING
Tags Stranger Things Breaking Bad La Casa de Papel Alerta Vermelho You O Projeto Adam
Tipo Série Série Série Filme Série Filme
Gênero Terror Ação Ação Ação Suspense Ação
Nota IMDB 8,7 9,5 8,2 6,3 7,7 6,7
MACHINE LEARNING
Ano 2016 2008 2017 2021 2018 2022

Ryan Reynolds Não Não Não Sim Não Sim
𝒂. 𝑇𝑖𝑝𝑜 + 𝒃. 𝐺ê𝑛𝑒𝑟𝑜 + 𝒄. 𝑁𝑜𝑡𝑎 𝐼𝑀𝐷𝐵 + 𝒅. 𝐴𝑛𝑜 + 𝒆. 𝑅𝑦𝑎𝑛 𝑅𝑒𝑦𝑛𝑜𝑙𝑑𝑠


MACHINE LEARNING
8,7 3,2 4,1 1,5 6,4

MACHINE LEARNING
7,7 8,1 7,6 4,4 5,0

8,7 3,2 4,1 1,5 6,4

MACHINE LEARNING
7,7 8,1 7,6 4,4 5,0

MACHINE LEARNING
8,7 3,2 4,1 1,5 6,4
TESTE
MACHINE LEARNING
7,7 8,1 7,6 4,4 5,0

MACHINE LEARNING
MACHINE LEARNING
Walmart 2004: 460 terabytes de dados

Análise da transação / cliente em questão de segundos

Indicações personalizadas para cada cliente

Indicações personalizadas para cada cliente
Analisar todas as publicações disponíveis em tempo real e

montar o feed personalizado de cada usuário
MACHINE LEARNING
MACHINE LEARNING
MACHINE LEARNING
- O que foi postado

- Foto ou vídeo?
- Quantidade de curtidas
- A pessoa que compartilhou
- É sua amiga?
MACHINE LEARNING
- Posta constantemente?
- Sua atividade
- Prefere vídeos ou fotos?
- Seu histórico com a pessoa que
postou
- Geralmente interage muito com ela?
- Curtiu / comentou seus últimos
posts?
EXPLORAR
MACHINE LEARNING
GRUPO 2
GRUPO 1
GRUPO 3
PESSOA 1 PESSOA 2
EXPLORAR CURTIDAS
POST 1 POST 1
MACHINE LEARNING
GRUPO 2
POST 2 POST 2
GRUPO 1
POST 3 POST 3
POST 5
GRUPO 3
PESSOA 1 PESSOA 2
EXPLORAR CURTIDAS
POST 1 POST 1
MACHINE LEARNING
GRUPO 2
POST 2 POST 2
GRUPO 1
POST 3 POST 3
POST 5
GRUPO 3
PESSOA 1 PESSOA 2
EXPLORAR CURTIDAS
POST 1 POST 1
MACHINE LEARNING
GRUPO 2
POST 2 POST 2
O
DAÇÃ
GRUPO 1
POST 3 POST 3
MEN
RECO
POST 5
GRUPO 3
PROJETO PRÁTICO DE CIÊNCIA DE DADOS
Você já fez uma compra pela internet em alguma loja no Brasil?
- Quase 100 mil pedidos
- Informação de itens no pedido
- Avaliação dos consumidores
- Prazo de entrega
-…
PREVISÃO DE VENDAS
Você já fez uma compra pela internet em alguma loja no Brasil? VENDAS EM ATRASO
PREVISÃO DE VENDAS
Você já fez uma compra pela internet em alguma loja no Brasil? VENDAS EM ATRASO
PREVISÃO DE VENDAS
NÚMERO DE PARCELAS
ENTREVISTA
Gabriel Lages
Diretor de DATA/Analytics da Hotmart
(a maior plataforma de ensino à distância
da América Latina) e também fundador
da Comunidade Data Hackers

Aula 1 - Intensivão de Ciência de Dados

Enviado por

Dados do documento

Descrição original:

Direitos autorais

Formatos disponíveis

Compartilhar este documento

Compartilhar ou incorporar documento

Opções de compartilhamento

Você considera este documento útil?

Este conteúdo é inapropriado?

Direitos autorais:

Formatos disponíveis

Aula 1 - Intensivão de Ciência de Dados

Enviado por

Direitos autorais:

Formatos disponíveis

INTRODUÇÃO A CIÊNCIA DE DADOS

Você já passou o seu cartão e recebeu uma mensagem que a

“SERÁ QUE ESTÃO ACHANDO QUE É UMA FRAUDE?”

“SERÁ QUE ESTÃO ACHANDO QUE É UMA FRAUDE?”

Ou recebeu uma mensagem como essa:

“NOSSA, O NUBANK TÁ ACHANDO QUE SOU MAU PAGADOR?”

“NOSSA, O NUBANK TÁ ACHANDO QUE SOU MAU PAGADOR?”

Mas como isso vai trazer

- Valor médio da compra

ANÁLISE HISTÓRICA DO MODELO DE

ANÁLISE HISTÓRICA DO MODELO DE

ANÁLISE HISTÓRICA DO MODELO DE

ANÁLISE HISTÓRICA DO MODELO DE ANÁLISE DA TRANSAÇÃO

ANÁLISE HISTÓRICA DO MODELO DE ANÁLISE DA TRANSAÇÃO

- Uso atual do limite

ANÁLISE HISTÓRICA DO MODELO DE ANÁLISE DA TRANSAÇÃO

ANÁLISE HISTÓRICA DO MODELO DE ANÁLISE DA TRANSAÇÃO

ANÁLISE HISTÓRICA DO MODELO DE ANÁLISE DA TRANSAÇÃO

TUDO ISSO É CIÊNCIA DE DADOS!

TUDO ISSO É CIÊNCIA DE DADOS!

TUDO ISSO É CIÊNCIA DE DADOS!

TUDO ISSO É CIÊNCIA DE DADOS!

APROVAÇÃO SUGESTÃO ANÁLISE DE

APROVAÇÃO SUGESTÃO ANÁLISE DE DEFINIÇÃO

APROVAÇÃO SUGESTÃO ANÁLISE DE DEFINIÇÃO ANÁLISE DE

PROBLEMA NA ENTREGA ATENDIMENTO RUIM

PROBLEMA NA ENTREGA ATENDIMENTO RUIM

APROVAÇÃO SUGESTÃO ANÁLISE DE DEFINIÇÃO ANÁLISE DE

Instagram: feed, reels, explorar,...

Você está ajudando no

A grande briga entre o Tiktok e o

A grande briga entre o Tiktok e o O Walmart usou Ciência de

A grande briga entre o Tiktok e o O Walmart usou Ciência de Os anúncios super

- Falta de profissionais qualificados

- Potencial que Ciência de Dados tem para

COLOCA NOS COMENTÁRIOS

Existe um método científico! Hipóteses

Existe um método científico! Hipóteses

Existe um método científico! Hipóteses

Tecnologia / Softwares tradicionais

Machine Learning Soma, media,

Machine Learning Soma, media,

O tamanho da base pode

Conclusões que estão corretas mas

Cidade Temp Média

Conclusões que estão corretas mas

Cidade Temp Média

Decisões que não fazem

A empresa deve usar o Orkut como principal

Tecnologia / Softwares tradicionais

Machine Learning Soma, media,

Análise Tratamento Definição do

Análise Tratamento Engenharia

Análise Tratamento Definição do

Tratamento dos dados Análise Exploratória

Inteligência Artificial: permitir que as máquinas

Inteligência Artificial: permitir que as máquinas

Machine Learning: o aprendizado

Inteligência Artificial: permitir que as máquinas Planejamento e

Processamento de Reconhecimento Machine Learning: o aprendizado

“É o campo de estudo que dá aos computadores a capacidade

“É o campo de estudo que dá aos computadores a capacidade

“Tá, mas o que isso quer dizer?