seria interessante mesmo. mas poderia me explicar melhor sobre o duck DB? ate vi algumas comparações dele com o clickhouse, mas o duck DB me pareceu um SQLite colunar, então nao sei se atenderia a demanda nesse meu caso.
Respondendo a "Eu fico pensando agora num duelo de 8tb do Post..." dentro da publicação Reduzi um DB de 8TB para 218 GB! como? ClickHouse!
1
1
To usando o DuckDB pra analises da área juridica. Como eu tenho acesso a anos de dados, preciso fazer essa análise de forma rápida, e o DuckDB conseguiu fazer o banco de dados .duckdb permanente de pouco mais de 2gb (em testes) me custando apenas 50mb de ram e 0% de CPU (vps de 4vcpu e 16gb ram). No caso, to usando ele como banco de dados permanente também, então todo o banco puro vai pra ele. No Postgres, antes da conversão pro DuckDB, tava chegando a 10gb e consumindo 18~22% de cpu com 3gb ram. A diferença foi bem grande.
To pensando em como usar o clickhouse nesse caso.
2
entendi, nesse caso o duckdb seria pra vc analisar localmente esses dados ne?
ai nao me atenderia, pois preciso de um DB online em um servidor pra que as APIs consumam esses dados pra exibir em dashboards de clientes.
imagino que possa ser o mesmo pra ti. pegar os dados ja comprimidos pelo duckdb e lançar no clickhouse pra poder usar via sistema ou algo do gênero
2
Entendi. Se você for continuar a saga do substituto perfeito para o Postgres, não esquece de postar. 🙏🏻🙏🏻