Tecnologias e componentes
- Apache Cloudberry, Greenplum, WarehousePG e SynxDB: opções SQL com processamento massivamente paralelo.
- Apache Spark: processamento em lote, preparação de dados e aprendizagem automática.
- Apache Iceberg e Hadoop: tabelas abertas em objetos e continuidade para históricos HDFS/YARN.
Arquitetura e operação
Desenhamos distribuição, particionamento, qualidade e cargas. Iceberg gere snapshots e esquemas; Spark transforma e o warehouse serve SQL e BI. O catálogo regista origens e transformações.
Casos de utilização
- Relatórios financeiros, análise de risco e históricos reproduzíveis.
- Evolução de Greenplum e migração de Snowflake, BigQuery ou Redshift, após avaliar SQL e integrações.
Como abordar a migração
Inventariamos esquemas, consultas, ETL e BI. Validamos a conversão SQL, carregamos o histórico e executamos em paralelo para comparar resultados, tempos e recursos.
O que entregamos
Desenho da arquitetura, configuração versionada, plano de testes, procedimentos de operação e recuperação e acompanhamento da equipa. Definimos os componentes operados pela sua equipa e os abrangidos pela Nuxia.
Versões, licenças, compatibilidades, cobertura e objetivos de serviço são definidos após a análise do ambiente. O dimensionamento e os resultados são validados com cargas e testes representativos.