01Explore a política de recuperação
- 01OrigemAmazon S3
CSV · gzip - 02Valide, filtre, agregue e transformeFlower
CSV → Parquet - 03DestinoAzure Blob
Parquet
OrigemAmazon S3
DestinoAzure BlobA amostra passa a validação e é convertida em Parquet. A ilustração mostra a entrega concluída; os controlos reais dependem do endpoint e da transformação configurados.
Uma falha temporária no destino suspende a entrega. As operações seguras seguem tentativas e esperas limitadas. Restaure o destino para explorar a recuperação; uma política esgotada exige intervenção.
A amostra contém um registo inválido. Este cenário isola todo o ficheiro de origem e bloqueia a entrega. Repetir os mesmos dados não resolveria a falha de validação.
O destino volta a estar disponível e a operação repetível termina. A limpeza da origem continua a ser uma decisão separada. A sequência é ilustrativa, não um tempo de recuperação medido.
02O que verificar no seu ambiente
| Cenário | Teste de aceitação |
|---|---|
| Entrega normal | Verifique se o resultado Parquet é legível e corresponde ao esquema acordado e aos registos esperados após a transformação. |
| Falha temporária | Torne o destino temporariamente indisponível. Observe tentativas e esperas limitadas para operações repetíveis e verifique o alerta quando a política se esgotar. |
| Ficheiro inválido | Envie um ficheiro com um registo que viole uma regra. Verifique a quarentena do ficheiro completo, com o motivo da falha, e que os dados inválidos não sejam entregues a jusante. |
| Recuperado dentro da política | Restaure o destino dentro da janela de tentativas e verifique o resultado final. Confira a retenção ou limpeza da origem segundo a política configurada separadamente. |
03Da ilustração à produção
Para S3 a Azure, acorde permissões, descompressão, esquema CSV, regras, mapeamento Parquet e quarentena. Teste falhas separadamente de dados malformados. A verificação depende do caminho de cópia e do fornecedor; dados transformados exigem validar o resultado, não presumir igualdade de bytes.