Consolidação de definição de dados

consolidação de dados é um processo de captura de dados de múltiplas fontes e integrar as informações em uma única fonte de dados, persistente para uso pelos assinantes em uma empresa. consolidação de dados é uma parte de três técnicas-o de integração de dados outros dois sendo propagação de dados e os dados federação. propagação de dados é o processo de replicação de dados de diferentes fontes em diferentes locais, e federação de dados permite uma visão unificada virtual de arquivos de dados de origem. tecnologias de consolidação de dados incluem ELT e ETL.

Extracto, de carga, Transform (ELT) define um processo em que a arquitectura do sistema transforma uma quantidade a granel de dados após os dados terem sido carregados numa base de dados alvo. Depois dos dados em bruto é carregado, é transformada e enviada para mesas onde eles podem ser acedidas pelos utilizadores finais individuais. sistemas ELT são categorizados como "puxar sistemas" porque a transformação de dados é iniciado a pedido, por instruções do utilizador final ou pela publicação programações pré-definidas. ELT permite aos usuários trabalhar em dados transformados e publicados, quando a informação é "puxado" após o ciclo de carregamento.

Extracto, Transform, Load (ETL) é outra técnica de consolidação de dados que extrai dados de uma ou mais fontes, transforma os dados de acordo com as regras prescritas e, em seguida, carrega os dados resultantes em sistemas de destino ou formatos de ficheiros especificados. ETL, como distinto de ELT, transforma os dados antes de o ciclo de carga, o que significa que os dados é simplificada, reformatado, padronizado, agregado ou submetido a qualquer outra norma de manipulação de dados estabelecido pela administração, antes de ser alimentada a uma interface do utilizador final.

Extração é a primeira etapa em ambas as tecnologias de consolidação de dados. extracção de dados pode ser de volumes muito elevados, a partir de múltiplas fontes heterogéneas. Extração pode ser a partir relacionais, bancos de dados hierárquicos e objeto, sistemas RFID, documentos XML, serviços web e aplicações empacotadas, incluindo SAP e PeopleSoft. Além disso, a extração pode ser executada em arquivos com informações estruturadas e não estruturadas, e os dados externos adquiridos de fontes externas também podem ser incluídos, dependendo da indústria e dados de relevância.

Em sistemas de ETL e ELT, a fase de transformação pode ser muito variada, variando de procedimentos simples, tais como conversões de arquivo ou do tipo, para operações complexas, tais como manipulação e integração baseado em lógica. transformação de dados é um recurso muito robusto de sistemas de ETL ELT e, permitindo que as empresas de transmitir oportuna, informações relevantes para seus gerentes e supervisores para uma melhor tomada de decisão. A transformação permite às empresas personalizar dados e produzir informações sob medida para uso interno. Dependendo da indústria, eo alcance e volume de negócios, as empresas podem agilizar o processo de transformação ou realizar operações completas sobre os dados coletados.

Carregando refere-se a transferência de dados para uma aplicação de destino. No caso de ELT, os dados carregados é não processado, mas em ETL, os dados são carregados depois de ser processado. A fase de carga em ambos os sistemas pode ser modificado com base nas métricas de aceitação de dados, permitindo que ambos os modos granel e escorrem para cada elemento de dados em cada ciclo de carregamento. A escolha de um modo de volume ou gotejar no carregamento de dados depende ênfase na latência de dados para o processo de integração, em que o modo de gotejamento sugere maior importância na minimização de latência.