Transformação de dados

A transformação de dados é o processo de reestruturação dos dados de um formato para outro. É um tipo de procedimento de gerenciamento de dados que envolve retirar dados de um formulário e convertê-los em um formato diferente. Geralmente, os dados originais devem ser reorganizados, reestruturados ou reformatados de alguma forma para se adequarem à saída desejada. O objetivo da transformação de dados é tornar os dados do sistema utilizáveis, compreensíveis e uniformes em todos os aspectos.

A transformação de dados contém duas atividades fracamente acopladas: a extração de dados de um formulário e o carregamento dos dados extraídos em outro formulário. Por exemplo, extrair dados de um banco de dados relacional, como SQL, e depois carregar os dados em uma plataforma analítica, como o cluster Apache Hadoop. O processo de transformação de dados envolve a aplicação de técnicas de mapeamento, limpeza e enriquecimento de dados.

Mapeamento de dados é o processo de especificar uma correspondência entre elementos em dois tipos de dados. O objetivo aqui é garantir que os elementos de dados nos dados originais sejam mapeados adequadamente para os elementos apropriados no novo formato de dados. Esta etapa também inclui a criação de novos identificadores únicos, se necessário. Limpeza refere-se ao processo de garantir que todos os elementos de dados atendam a um determinado conjunto predefinido de valores ou integridade. Isso pode incluir a padronização de formatos, a eliminação de dados corrompidos e a adição de itens de dados ausentes. Por último, o enriquecimento envolve o uso de fontes de dados adicionais para agregar mais contexto e valor aos dados.

A transformação de dados é uma parte importante do gerenciamento de dados e é frequentemente usada para tornar os dados existentes utilizáveis, compreensíveis e uniformes. É um processo complexo que muitas vezes requer mapeamento, limpeza e enriquecimento de dados, o que pode ajudar a agregar valor aos dados recém-transformados.