Olá, Com o aumento de API´s no nosso dia a dia, surgem alguns casos pontuais que quando trabalhávamos só com arquivos ou bancos de dados não apareciam. Algumas API retornam os dados de data em formato Epoch: Esse…
Olá, Tudo bem contigo? Muito se fala em LGPD, Lei Geral de Proteção dos Dados, mas como implementarmos isso no nosso ETL, ou melhor como proteger dados sensiveis, como Nome, telefone, email. Uma forma bastante simples de se fazer isso no Pentaho é utilizando o step: Add a…
Olá, Tudo bem contigo? Recentemente um dos nossos alunos estava com dificuldades para gravar dados no Google Storage, para poder criar o seu 1º Data lake, utilizando o Pentaho Data Integration, funcionava normal, porém na hora de entregar o projeto. Criar o Servidor na Google Cloud, utilizando o…
1º dia do Treinamento: Pentarruda Google Cloud Olá! Tudo bem contigo? Nesse sábado(11/09/2021) tivemos o 1º dia do nosso mais novo treinamento: Pentarruda Google Cloud! Que dia íncrivel, primeiro pelas pessoas que estão nesse treinamentos, muitas referências na área de dados temos especialistas em diversas Tecnologias, ETL, Power…
Como Integrar o Pentaho com o Big Query! Antes de mais nada Talvez você já deve ter ouvido falar do Big Query da Google? certo? mas você saberia integrar o pentaho com o Big Query? Big Query é um dos melhores produtos que já vimos na Cloud. Grandes…
Como Transformar Colunas em linha com o Pentaho step Row Normaliser Olá, tudo bem com você? Nesse artigo irei mostrar como Transformar Colunas em linha com o Pentaho step Row Normaliser Iremos começar com o Datagrid para criar alguns dados pra nós: Antes de tentarmos transformar as colunas…
Como Tratar dados com o Split field to rows Olá tudo bem? Em primeiro lugar Hoje iremos compartilhar com você mais uma maneira rápida e eficaz de utilizar o pentaho data integration para tratar os nossos dados, utilizando o step: Split field to rows. Começando com o Datagrid…
Como utilizar o Value Mapper para renomear valores Olá, tudo bem com você? A parte de preparar os dados é uma das etapas que mais levamos tempo em projetos de BI ou Big Data. E se você está acostumado a utilizar IF, Swichs e replaces apresento a vocês…
Como ler vários arquivos de uma só vez Olá tudo bem com você? Você já teve que fazer alguma integração de dados de arquivos separados por data, empresa, categoria? Muito provável que sim e as vezes deve ter utilizado um step para cada arquivo? Então se você já…