Ferramentas Pessoais

ETL com Software Livre

O talend apresenta uma solução completa para necessidades ETL e integração de dados.

Um dos componentes essenciais de uma solução para a

inteligência de negócios (BI– Business Intelligence ) é o módulode integração de informações de diversas fontes de dados. Felizmente o mercado de Software Livre e de código aberto oferece algumas soluções bastante completas que são usadas dentro dos pacotes de BI ou em modo stand alone. As soluções de integração de dados são conhecidas como ETL ( Extract , Transform , Load ), pois a missão dessas soluções é integrar informações e prepará-las para a formação de tabelas no data mart . Normalmente os dados precisam ser manipulados depois de obtidos e logo inseridos nas tabelas dos bancos de dados em que reside o data mart. Ou seja, estamos falando em obter os dados, aplicar regras de negócios da empresa, facilitar as consultas posteriores ou validar a qualidade dos dados e entregá-los transformados ao destino final. Dentre as transformações normalmente aplicadas aos dados, podemos destacar a seleção de campos importantes para a análise, a filtragem dos registros necessários, a limpeza dos dados (“Sr.” ou “Senhor” passam a valer “S”), a geração dos campos calculados (por exemplo, “valor nf = quantidade * valor unitário”) etc. Mas essas soluções também podem ser consideradas integradores e manipuladores de dados para outras necessidades, podendo substituir muitos sistemas de “interfaces” de dados que são desenvolvidos pelas áreas de
TI de grandes empresas.

Hoje, qualquer empresa tem necessidades de ETL e integração de dados, e em muitos casos é caro e complexo desenvolver soluções caseiras específicas. O Talend apresenta uma solução flexível com a qual estes processos podem ser modelados e executados de forma confiável. Podem ser definidos e documentados com a participação dos usuários que são os principais interessados no resultado final.


O artigo completo pode ser lido aqui.


Conteúdo relacionado