Te Desafio para participar desse projeto de Pipeline

Bom dia a todos.

Ontem criei meu projeto mais ambicioso.

Participei da rinha Backend esse e ano e achei demais o aprendizado.

Agora quero passar uma no contexto de engenharia de dados (estilo de arquitetura pipeline)conde tu tem que transportar mais de 60 milhões de linhas de arquivos zipados csv para uma tabela psql.

Aqui no repo tu vai encontrar toda documentação explicando os deralhes e como participar.

Minha maquina homelab esta ligada aqui pra rodar seu código.