Dado que a governança de dados é uma das atuais preocupações das
empresas, enxerga-se a necessidade das companhias em transformar os dados brutos em informações a fim de auxiliar o processo de tomada de decisões das empresas. Dessa forma, as atuais iniciativas de gerenciamento de dados estão focadas em soluções que permitam um melhor gerenciamento e controle dessas informações.
Sendo assim, a empresa ASG Technologies Group desenvolveu a
ferramenta ASG Data Intelligence. Essa ferramenta concede ao usuário ter acesso a toda sua linhagem e rastreabilidade dos dados em todo o seu ciclo de vida, permitindo assim a governança, já que é possível acessar os dados da empresa em qualquer lugar atendendo a uma necessidade já que os dados são acessados cada vez mais pelos próprios funcionários.
Portanto, a solução desenvolvida por essa ferramenta auxilia o cliente
final no gerenciamento de informações, uma vez que os clientes podem localizar, entender, governar e entregar as informações de qualquer tipo, oriundos de qualquer fonte ao longo do ciclo de vida dos dados.
2 – ASG Data Intelligence
Um dos pontos chaves da ferramenta é solucionar o problema de
confiança na autenticidade dos dados que dão suporte as operações e o gerenciamento do negócio. Assim, o Data Intelligence permite uma ampla cobertura de fontes de dados que vai desde bancos de dados, data lakes, até ferramentas de modelagem corporativa. Desta forma, a solução apresentada oferece uma análise macro da linhagem de dados entre armazenamento de dados e também uma análise em micro nível da linhagem de dados no código do aplicativo.
Figura 1 – Categorias de origens dos dados através da ferramenta. (ASG, 2020)
Portanto, podemos notar que a solução oferece suporte a metadados
capturados tanto em plataformas de mainframe, quanto em nuvem ou em banco de dados. Além disso, concede ao usuário a empresa ferramentas de suporte à criação de interfaces de metadados personalizados, permitindo o estudo e conclusão de uma ampla base de linhagem de dados.
3 – Linhagem de dados nos códigos de aplicação
Frente a um cenário tecnológico desafiador, no qual é necessário
mapear a linhagem de dados, também se torna necessário entender o código para entender e analisar itens de dados e transformações. Segundo a ASG (2020), a sua ferramenta contém uma solução que é chamada de CAE (Common Analytic Engine), que consegue reunir a base de dados armazenadas para dar suporte à análise de linhagem de dados no código do aplicativo. Dessa forma, ainda segundo a empresa, o CAE utiliza um processo similar ao procedimento utilizado para compilar certos programas. Todo esse processo ao invés de traduzir o código em um formato executável, cria novas informações essenciais para dar suporte às consultas posteriores de linhagem. Posto isso, de acordo com a ASG (2020), a ferramenta gera informações sobre “etapas” da linhagem e informações sobre as transformações dos dados como forma de componentes do programa. Assim, o CAE consegue “acomodar” todas essas complexidades dentro do seu sistema.
Figura 2 - Linhagem do código do aplicativo. (ASG, 2020)
No entanto, mesmo que o CAE possibilite muitas formas de representar
uma visão clara da linhagem, não é possível identificar a quantidade de linhagem de dados para cada item referenciado pela ferramenta, já que o CAE utiliza a linhagem sob demanda, utilizando a base de conhecimento pré- construída (ASG,2020).
4 – Recurso “out of the box” como forma de visualização de dados
Outro diferencial da ferramenta é o recurso “out of the box”, no qual o
cliente final consegue visualizar de maneira clara e objetiva quais dados contribuem para determinado relatório. Sendo assim, de acordo com a ASG (2020),
Figura 3 - Visualização resumida da linha de dados (ASG, 2020).
Com a Figura 4, podemos visualizar de forma resumida como é fornecida a visualização desse recurso dentro da plataforma. Dessa forma, segundo a ASG (2020), a utilização desse tipo de visualização em Table Level é ideal para explicitar o fluxo do sistema, uma vez que, constantemente, é necessário entender a derivação de um elemento de dados específico dentro do projeto. Além disso, esse recurso também possibilita a visualização de forma detalhada, já que possibilita melhores maneiras de ver o fluxo de dados e um apoio mais detalhado para os sistemas de suporte à decisão.
Figura 4 - Visualização detalhada da linhagem de dados (ASG, 2020).
A Figura 6 exemplifica como funciona a visualização detalhada da
linhagem de dados dentro da ferramenta Data Intelligence, no qual é possível visualizar a linhagem em nível de campo e coluna de dados. Além disso, ela apresenta as transformações como losangos vazios a fim de mostrar movimentos de dados simples e losangos preenchidos para indicar uma presença de lógica de transformação que ocorreu na coluna posterior. 5 – Conclusão
Diante dos fatos, podemos considerar que cada elemento da solução
Data Intelligence foi criada com a intenção de atender às necessidades de análise completa da linhagem de dados. Além disso, podemos destacar que algumas soluções e características da ASG Data Intelligence tornam a ferramenta única, como: análise de micro nível da linhagem de dados no código do aplicativo, análise em nível macro da linhagem de dados entre armazenamentos de dados, visualização apropriada do caso de uso da linhagem de dados,
Dessa forma, chegamos à conclusão que a ferramenta une informações
sobre linhagem de dados com termos de negócios, dados de referência e informações de governança de dados para mostrar uma visão completa de um item de dados. Portanto, o seu principal diferencial perante as outras ferramentas disponíveis é a sua integração com a capacidade de gerenciamento de problemas para gerenciar a resolução de problemas de linhagem e rastrear o histórico de resolução de problemas. Referências Bibliográficas
ASG Technologies. Data Lineage – Diving Deeper. Disponível em:
https://content.asg.com/MarketingCollateral/DataIntelligence/Whitepaper- Enterprise-Data-Intelligence-Solutions-Data-Lineage-en.pdf . Acesso em 16 de junho, 2022.
ASG Technologies. ASG Data Intelligence: Truth in Data. Disponível em:
https://www.youtube.com/watch?v=as7NcfHPbfo&t=71s . Acesso em 16 de junho, 2022.
ASG Technologies. ASG Technologies Enterprise Data Intelligence CCAR
Demo. Disponível em: https://www.youtube.com/watch?v=E9-ZpsW3zyE . Acesso em 16 de junho, 2022.