Flujo de referencia

Sigue los datos. Examina las decisiones.

Explora cómo Flower® gestiona un flujo de Amazon S3 a Azure Blob: valida archivos CSV comprimidos, los transforma en Parquet y aplica políticas de recuperación o cuarentena. Selecciona un escenario para seguir sus decisiones.

Evaluemos tu flujo ↗

01Explora la política de recuperación

Explora la política de recuperaciónorders-001.csv.gz
  1. 01OrigenAmazon S3CSV · gzip
  2. 02Valida, filtra, agrega y transformaFlowerCSV → Parquet
  3. 03DestinoAzure BlobParquet
Entregado

La muestra pasa la validación y se convierte a Parquet. La ilustración muestra la entrega completada; los controles reales dependen del endpoint y la transformación configurados.

02Qué verificar en tu entorno

Qué verificar en tu entorno
EscenarioPrueba de aceptación
Entrega normalComprueba que el resultado Parquet sea legible y respete el esquema acordado y los registros esperados tras la transformación.
Fallo temporalHaz que el destino quede temporalmente inaccesible. Observa intentos y esperas limitados para operaciones repetibles y comprueba el aviso cuando se agote la política.
Archivo inválidoEnvía un archivo con un registro que infrinja una regla. Comprueba la cuarentena del archivo completo, con el motivo del error, y que los datos inválidos no se entreguen al destino.
Recuperado dentro de la políticaRestaura el destino dentro del plazo de reintentos y verifica el resultado final. Comprueba la conservación o limpieza del origen según su política independiente.

03De la ilustración a producción

Para S3 a Azure, acuerda permisos, descompresión, esquema CSV, reglas, mapeo Parquet y cuarentena. Prueba fallos por separado de datos malformados. La verificación depende de la ruta de copia y del proveedor; los datos transformados requieren validar el resultado, no suponer igualdad de bytes.

Hablemos de tu flujo de datos

Convierte el requisito en un flujo de producción fiable.

Describe el origen, el destino, el volumen, las restricciones o el modo de fallo. Hablarás directamente con el equipo que desarrolla Flower.

Habla con el equipo de Flower