Arquivo da tag: data quality

O BI sem data quality não tem tanta “intelligence” nem serve ao “business”

Temos a tendência em acreditar que tudo é novidade na área da tecnologia da informação. Nós, os mais “antigos” temos vistos temas sendo revisitados e relançados. Assim como na moda, a área de TI abandona algumas tecnologias para anos depois, relança-las com alguma roupagem nova e/ou releitura. E mais, em TI, temos a indiscreta mania de fazer isso com nomes pomposos, estrangeiros, e, se for sigla então, fica parecendo mais novidade ainda!

Pois bem, com Data Quality não seria diferente. Muitas empresas ao redor do globo já praticam alguma forma de DQ. Lembrando, que existem níveis de maturação de empresas, pessoas, processos e dos próprio dados, quando falamos de DQ.

Por exemplo, qualquer pré-checagem de dados, na sua entrada (na digitação mesmo), ou, uma verificação (constraint) na coluna de uma tabela do RDBMS já é um passo em direção ao DQ.

Continue lendo O BI sem data quality não tem tanta “intelligence” nem serve ao “business”

Qual a diferença entre ETL e MDM?


MDM
ETL é um velho conhecido. ETL significa Extract – Transform – Load, ou, em “bom quase bom português”: Extrair, Transformar e Carregar. Nos últimos anos alguns “vendors” (fabricantes), notadamente, a IBM, tem aparecido com “várias variações”, tais como: TEL e T-ETL, por exemplo. Mas, no fundo “ETL” em que pese o significado de suas “letrinhas combinadas” é um processo de migração, de transporte de dados.

 O objetivo máximo de uma ferramenta de ETL é transportar dados de uma ou mais fontes de origem (A) para um destino (B). Normalmente, (A) é uma banco de dados relacional e/ou arquivos texto (xml, csv, “plain text”). E, o destino ou (B), geralmente, é um Data Mart ou Data Warehouse (banco de dados relacional, NoSQL, BigData, etc). Obviamente, existem outros usos mais específicos (e até mais bacanas) para ETL.

Continue lendo Qual a diferença entre ETL e MDM?

Master Data (Dados Mestre)

Master Data, ou, Dados Mestre, como resolveu-se traduzir ou convencionar para a língua portuguesa. Por que isso tem tudo a ver com adata_caos vida de DBA’s, DA’s, e Desenvolvedores?

O conceito não é novo. Mas, em tempos de Real forte, aquisições, fusões, joint-ventures, crescimento e prosperidade em terras brasilis, este conceito ganha bojo e destaque em corporações de médio e grande portes. Do conceito de Master Data lança-se ao MDM (Master Data Management), e, é a base para qualquer processo de Data Quality. Neste artigo vou usar o estrangeirismo, pois, acho mais bonitinho 🙂

Se fizermos uma busca na internet sobre o que é Master Data, encontraremos inúmeras definições, particularmente, prefiro as definições endereçadas pela Oracle e Semarchy. Continue lendo Master Data (Dados Mestre)