Logs dentro do Pentaho
Bom dia tudo bem com você?
Você já teve problemas com manutenção no seu Data Wharehouse aonde ficava lendo vários arquivos textos?
Bom então esse post é pra você?
No vídeo abaixo eu mostro como podemos trabalhar com Logs dentro do Pentaho Data Integration.
[embedyt] https://www.youtube.com/watch?v=NU3Qat9LVZw[/embedyt]
Imagina você tendo dados de quantos registros entraram e sairam em cada step do seu fluxo:
Podendo gerar insights como:
- Qual tabela que leva mais tempo.
- Qual step que leva mais tempo
- Qual tabela que esta lendou ou gravando um número de dados maior do que o normal.
- Qual join esta demorando mais tempo.
E são analises que vão te ajudar a melhorar a performance do seu ETL.
Gostou do vídeo?
Segue nosso canal e fique por dentro dos nossos conteúdos.
Até o próximo Post.
Comentários (4)
Fabiano Bernardo
says março 16, 2021 at 12:27 pmMuito bom Rafael! boa dica, visualização de logs e muito importante em um projeto, agora coloca-los em um banco de dados fica bem mais fácil para possível análise.
Continue gerando mais conteúdos relevantes, a comunidade agredece.
Valeu!
R-arruda
says março 16, 2021 at 1:40 pmMuito Obrigado pelo Feedback Fabiano!
Cintia Akutagawa
says abril 03, 2021 at 5:11 pmDica muito boa !!!
obs:somente a 1 carga que fica com a data desconfigurada depois o ajuste é automático
R-arruda
says abril 09, 2021 at 4:39 pmMuito Obrigado Cintia!!