Grande parte da eficiência dos projetos de dados estão ligados à qualidade da sua gestão de conhecimento. Quanto mais origens de dados e objetos estiverem sob a gestão da sua empresa, mais crítico se torna uma boa organização e rastreabilidade da informação.
Um componente fundamental da rastreabilidade dos dados são os metadados que, de forma simples, guardam informações adicionais sobre os seus dados. Metadados não são apenas “dados sobre os dados” eles são capazes de descrever, de forma suscinta, o que significa um dado sem que seja necessário olhar para o dado em si.
Quando você utiliza a plataforma da Kondado para centralizar e modelar informações de várias fontes, os dados transitados são apagados dos nossos servidores assim que esse objetivo foi cumprido – garantido que você tenha a única cópia dessa informação.
Para fazer esse fluxo de dados de uma maneira assertiva, internamente a nossa plataforma utiliza um conceito criado por nós chamado “Common Metadata Schema” ou CMS.
O CMS nos permite padronizar informações e formatos de várias fontes diferentes de maneira escalável e ágil – graças a ele conseguimos disponibilizar novos conectores rapidamente e garantir a comunicação entre a nossa interface gráfica e os nossos servidores de integração e modelagem de forma segura.
Hoje demos um passo além e incluimos na nossa plataforma uma funcionalidade de pesquisa de metadados. Agora você pode buscar por nomes de tabelas, colunas e queries para rastrear o fluxo completo dos seus dados. Veja como funciona:
Acesse a nossa plataforma e, na barra superior, digite o termo que você deseja buscar e aperte enter:
Você verá os resultados completos da sua busca. No exemplo abaixo, o termo “mautic” foi buscado em todos os metadados das suas integrações e modelos: nomes, tabelas, colunas e queries. Você verá na coluna “Hits” onde foi encontrado o termo que você buscou:
Agora, imagine que você está olhando o seu banco de destino e encontrou uma tabela chamada “bitnami_mautic_ma_email_stats_full” e quer saber de onde ela vêm, com qual frequência e como está configurada. Como você já sabe que se trata de uma tabela, você não está interessado em colunas que tenham esse nome, por exemplo.
Você pode aplicar esses filtros clicando em “FILTROS” logo abaixo da caixa de busca:
Basta selecionar os campos que você gostaria que fossem pesquisados e apertar em “BUSCAR”:
Nesse caso, nós buscamos pelo termo e incluímos na busca as “Tabelas full” e “Tabelas deltas” das integrações e “Nome da tabela” dos modelos. Agora você conseguiu localizar qual integração ou modelo controla a tabela e conferir pode os seus detalhes.
