Loop com Apache Hop
Neste post compartilho com vocês duas maneiras de criar Loop utilizando o Apache Hop. Objetivo: Criar 2 modelos de loop que percorra uma pasta principal, acesse todas as subpastas dentro dela, e leia todos os arquivos XLSX encontrados em cada subpasta. O loop funcionará independe do número de subpastas que haja na pasta principal. Neste
Leia mais
Treinamento: Python para Engenheiro de dados – 1º dia
Olá, Tudo bem contigo? Nesse sábado, 20/05/2023, tivemos o 1º dia do nosso mais novo treinamento, Python para Engenheiro de dados, aplicado pelo instrutor Leandro Silva. Neste sábado foram abordados os seguintes temas: Criação da conta na Google Cloud. Utilizamos o IAM para criar as permissões e acessos. Criação de um banco de dados na
Leia maisComo utilizar a função Zip() no Python
O Python é uma linguagem de programação muito versátil e poderosa, com muitas ferramentas úteis para ajudar a simplificar o desenvolvimento de software. Uma dessas ferramentas é a função zip() que permite combinar elementos de duas ou mais listas em uma única lista. A função zip() é usada para juntar duas ou mais listas em
Leia maisComo Instalar o Hop Server?
Olá, tudo bem contigo? Nesse artigo iremos compartilhar contigo como subir o serviço do Hop Server. Primeiramente iremos abrir o cmd, ir até a pasta aonde o nosso hop está instalado e executar o seguinte comando. hop-server servidor porta Nesse exemplo irei subir o Hop Server no meu computador local e irei utilizar a porta
Leia mais
Como Encriptar suas senhas no Apache Hop
Olá, Tudo bem contigo? Você que já trabalha algum tempo com Pentaho, chegou a testar o Apache Hop? Se sim, uma das primeiras coisas que testamos é a forma de poder trabalhar com projetos e os seus respectivos ambientes não é mesmo. Aonde com as mesmas variaveis com um mesmo pipeline num clique executamos o
Leia maisGoogle Data Fusion
O que é o Google Data Fusion? Antes de mais nada Você provavelmente conhece o Big Query, Google Storage, soluções bem utilizadas na Google Cloud Plataform, porém temos um serviço novo chamado Google Data Fusion, a solução de ETL da Google. Em outras palavras Google Data Fusion é uma solução Drag-Drop. Onde criamos pipelines de
Leia mais