Escolar Documentos
Profissional Documentos
Cultura Documentos
uma arquitetura
analítica moderna
A PRODUÇÃO DE UMA ARQUITETURA ANALÍTICA MODERNA
analytics
2
A PRODUÇÃO DE UMA ARQUITETURA ANALÍTICA MODERNA
analytics
3
A PRODUÇÃO DE UMA ARQUITETURA ANALÍTICA MODERNA
analytics
4
A PRODUÇÃO DE UMA ARQUITETURA ANALÍTICA MODERNA
analytics
5
A PRODUÇÃO DE UMA ARQUITETURA ANALÍTICA MODERNA
analytics
6
A PRODUÇÃO DE UMA ARQUITETURA ANALÍTICA MODERNA
Projetado antes da
Gravado no momento da
Esquema implementação do data
análise (esquema on-read).
warehouse (esquema on-write).
Dados altamente
Dados que podem ou
organizados que servem
Qualidade dos dados não ter sido organizados
como fonte central
(isto é, dados brutos).
de inteligência.
Cientistas de dados,
desenvolvedores de dados
Usuários Analistas comerciais e analistas comerciais
(usando dados previamente
organizados).
analytics
8
A PRODUÇÃO DE UMA ARQUITETURA ANALÍTICA MODERNA
Antes que possam ser analisados, os dados precisam ser coletados, processados
e armazenados. Isso pode ser visualizado como um pipeline analítico que
extrai dados de sistemas de origem, processa os dados e os coloca em locais
de armazenamentos onde podem ser analisados. Os pipelines de análise são
projetados para manipular grandes volumes de dados de entrada de fontes
diversas, como bancos de dados, aplicativos e dispositivos.
1. Coletar dados.
2. Processar dados.
3. Armazenar dados.
4. Analisar e visualizar dados.
5. Prever resultados futuros (novo, não mostrado na figura).
analytics
9
A PRODUÇÃO DE UMA ARQUITETURA ANALÍTICA MODERNA
Coletar dados
Considere os diferentes tipos de dados: dados transacionais, dados de log, dados
de streaming e dados da internet das coisas (IoT). Cada tipo de dado pode ser
armazenado em locais mais adequados para os dados e seu uso. Alguns locais de
armazenamento de dados são otimizados para dados transacionais ou relacionais
e outros para dados não relacionais ou não estruturados. A melhor estratégia
é usar um banco de dados mais adequado aos dados e aos aplicativos que
produzem ou consomem os dados.
• Dados de log: a captura confiável de logs gerados pelo sistema ajudará você
a solucionar problemas, fazer auditorias e análises usando as informações
armazenadas nos logs. Um data lake é uma solução de armazenamento
muito usada para dados de log usados em análise.
analytics
10
A PRODUÇÃO DE UMA ARQUITETURA ANALÍTICA MODERNA
Processar dados
O processo de coleta reúne ou extrai dados de fontes de dados, transforma os
dados e os armazena em outro local, como outro banco de dados, um data lake ou
um serviço analítico (data warehouse), onde podem ser processados ou analisados.
Armazenar dados
É possível armazenar seus dados em um data lake ou em uma ferramenta analítica,
como um data warehouse.
analytics
12
A PRODUÇÃO DE UMA ARQUITETURA ANALÍTICA MODERNA
• Data mart: um data mart é uma forma simples de data warehouse focada
em uma área funcional ou em um assunto específico. Ele contém cópias de
um subconjunto de dados no data warehouse. Por exemplo, podem existir
data marts específicos para cada setor em sua organização ou data marts
segmentados por regiões. É possível montar data marts de um grande data
warehouse, armazenamento operacional ou de forma híbrida. Os data marts
são fáceis de projetar, construir e administrar. No entanto, como estão focados
em áreas funcionais específicas, a consulta em diferentes áreas funcionais
pode ser mais complicada, por causa da distribuição de dados.
Analisar dados
analytics
13
A PRODUÇÃO DE UMA ARQUITETURA ANALÍTICA MODERNA
• Análise de data lake: está surgindo uma nova geração de data warehouse
que amplia as consultas do data warehouse ao data lake, para processar
dados estruturados ou não estruturados no data warehouse e no data lake,
chegando até os exabytes sem mover dados.
analytics
14
A PRODUÇÃO DE UMA ARQUITETURA ANALÍTICA MODERNA
analytics
15
A PRODUÇÃO DE UMA ARQUITETURA ANALÍTICA MODERNA
analytics
16
A PRODUÇÃO DE UMA ARQUITETURA ANALÍTICA MODERNA
analytics
17
SOBRE A AWS
Há 13 anos, a Amazon Web Services é a plataforma em nuvem mais abrangente e adotada
do mundo. A AWS oferece mais de 165 serviços completos para computação, armazenamento,
banco de dados, redes, análises, robótica, machine learning e inteligência artificial (AI), internet
das coisas (IoT), dispositivos móveis, segurança, hibridização, realidade virtual e aumentada (VR
e AR), mídia e desenvolvimento, implantação e gerenciamento de aplicativos em 61 zonas de
disponibilidade (AZ) em 20 regiões geográficas que abrangem EUA, Austrália, Brasil, Canadá,
China, França, Alemanha, Índia, Irlanda, Japão, Coréia, Cingapura, Suécia e Reino Unido. Milhões
de clientes, inclusive as startups que mais crescem, as maiores corporações e os principais órgãos
governamentais, confiam na AWS para viabilizar suas infraestruturas, agilizá-las e reduzir custos.
Para saber mais sobre a AWS, consulte https://aws.amazon.com.
analytics © 2019, Amazon Web Services, Inc. ou suas afiliadas. Todos os direitos reservados.
18