Olá, tudo bem contigo?
Nesse último sábado começou o nosso novo Treinamento: AirDBT – Modern Data Engineer.
Nesse Treinamento o foco é criarmos uma Modern Data Stack, seria muito mais fácil fornecemos uma imagem de um Servidor pronto e totalmente configurado, mas e após os curso, como os alunos irão conseguir replicar no projeto atual deles.
Temas abordados no 1º dia:
- O que é uma Stack Moderna de Dados.
- Criação da conta na Google Cloud Plataform.
- Criação de um servidor Linux na nuvem.
- Instalação do Docker.
- Subimos um Postgres no Docker, que será nossa fonte de dados no curso.
- Subimos o Airbyte, que será o responsável pela ingestão dos dados.
- Carregamos 70 tabelas no Bigquery, dados brutos.
- E claro sempre com hand-ons, se o aluno tem dúvida compartilhamos a tela e assim avançamos todos juntos.
Tudo isso num único dia? Isso mesmo pois além de termos conhecimento no dia a dia por conta dos diversos clientes que atendemos, temos uma didática já conhecida e referência no mercado de dados.
Quer conhecer maiores informações, sobre o Treinamento, só acessar o link abaixo:
https://airdbt.arrudaconsulting.com.br/
Próximo sábado tem mais 8 horas, com os dados carregados no Data Lake, iremos criar o DW com o DBT e no final iremos realizar a orquestração dos pipelines utilizando Apache Airflow.
E assim finalizamos a Arquitetura do projeto do zero.
Muito Obrigado.
Time Arruda Consulting.