Qualificação da rota
01O nome do conector é o início do desenho.
Dois produtos podem listar o mesmo endpoint e oferecer garantias, limites de falha, dependências de segurança e custos diferentes. Qualifique toda a rota da origem ao destino antes de considerar a cobertura do catálogo pronta para produção.
Estabeleça o limite de leitura
Determine como interagem listagem, paginação, snapshots, cursores de alteração e mutações concorrentes. A rota precisa de uma posição durável e regra para objetos ou linhas criados, alterados, renomeados ou removidos durante a leitura.
Estabeleça o limite de escrita
Valide atomicidade, sucesso parcial, overwrite ou upsert, atraso de visibilidade e idempotência no destino. Defina que confirmação fecha a unidade e o que deve ser reconciliado antes de repetir uma escrita com timeout.
Desenhe identidade e rotação de segredos
Teste privilégio mínimo, rotação de credenciais e certificados, requisitos de proxy ou rede privada e expiração durante trabalho longo. Decida como runtimes desligados obtêm e renovam segredos sem os incorporar nos fluxos nem bloquear recuperação.
Defina o contrato de dados
Especifique evolução de esquema, precisão de tipos, nulos, fusos horários, codificação, ordem e conversão de formato. Decida que alterações são compatíveis, quais exigem quarentena e como a evidência de validação acompanha os dados transformados.
Posicione processamento e percursos de rede
Registe onde os bytes atravessam regiões, redes públicas, gateways, proxies ou limites de egress e onde se executam filtragem, agregação, compressão e cifragem. Inclua residência, latência, isolamento de falhas e operação offline.
Alinhe a semântica de ciclo de vida
Mapeie eliminação, renomeação, arquivo, retenção, legal hold, imutabilidade, substituição no destino e limpeza. O desenho só fica completo quando ciclos de vida e evidências antes de ações destrutivas estão alinhados.
Transporte evidência de recuperação
Ligue identidade da origem, checkpoint, transformação, validação, resultado no destino, tentativas, reconciliação, quarentena e ação final numa sequência. Alertas devem mostrar essa cadeia sem correlacionar logs desligados.
Teste throughput e custo total
Meça tamanhos reais, lotes de linhas, concorrência, quotas API, transações, compressão, recuperação da acumulação e efeito de ficheiros pequenos. Calcule em conjunto computação, armazenamento, pedidos, egress, gateways, monitorização, suporte e trabalho operacional.
Ligue o ecossistema que já utiliza
02Armazenamento e transferência
Use armazenamento de objetos cloud, HDFS, IPFS, partilhas SMB, serviços de ficheiros, protocolos seguros, ficheiros locais e API especializadas como origens ou destinos. Cada rota pode herdar agendamento, novas tentativas, reconciliação, validação, linhagem, políticas de ciclo de vida e alertas proativos, sem reconstruir esses controlos para cada conector.
Amazon S3
Armazenamento de objetos
Saber mais →
Azure Blob
Armazenamento de objetos
Saber mais →Azure Files
Armazenamento de ficheiros
Azure Data Lake
Armazenamento de data lake
Google Cloud Storage
Armazenamento de objetos
Saber mais →
Oracle Cloud
Armazenamento de objetos
Alibaba OSS
Armazenamento de objetos
OpenStack Swift
Armazenamento de objetos
Apache Hadoop HDFS
Sistema de ficheiros distribuído
IPFS
Armazenamento endereçado por conteúdo
Google Drive
Unidade cloud
Dropbox
Unidade cloud
Microsoft OneDrive
Unidade cloud
SharePoint libraries
Biblioteca de documentos
Databricks Volumes
Armazenamento lakehouse
App Store Connect
API de relatórios
SFTP / SSH
Transferência segura
Saber mais →FTP / FTPS
Transferência de ficheiros
TFTP
Transferência de ficheiros
WebDAV
Armazenamento web
HTTP / HTTPS
Transferência web
SMB 2 / 3
Partilha de ficheiros em rede
Ficheiros locais
Armazenamento do dispositivo
IMAP
Fonte de correio eletrónico
03Bases de dados e motores de consulta
Ligue Snowflake, bases transacionais, motores analíticos, warehouses, lakehouses, bases distribuídas e protocolos SQL genéricos sem prender o fluxo a um fornecedor. As rotas Snowflake suportam leituras, escritas e transações explícitas; qualifique o volume DML e a estratégia de carregamento de cada workload. O Flower mantém controlos de integridade e evidências operacionais durante a entrega, permitindo governar o movimento como um percurso único.
PostgreSQL
Base de dados SQL
Saber mais →
MySQL
Base de dados SQL
Saber mais →
Microsoft SQL Server
Base de dados SQL
Saber mais →Oracle Database
Base de dados SQL
Saber mais →
SQLite
Base de dados integrada
ClickHouse
Base de dados analítica
Databricks SQL
Armazenamento lakehouse
Snowflake
Plataforma de dados cloud
SAP HANA
Base de dados SQL
Cloud Spanner
Base de dados distribuída
Trino
Motor de consulta
Presto
Motor de consulta
Exasol
Base de dados analítica
Vertica
Base de dados analítica
IBM Netezza
Data warehouse
Arrow Flight SQL
Protocolo de consulta
ODBC / Avatica
Acesso SQL genérico
04Segredos e certificados
Resolva segredos e certificados a partir de cofres cloud, arquivos de cluster, ficheiros cifrados ou um diretório local restrito antes de iniciar os componentes dependentes. Flower publica um único snapshot de configuração só de leitura após carregar todas as fontes exigidas, para que um valor ausente interrompa o arranque em vez de surgir durante um fluxo.
Azure Key Vault
Segredos e certificados cloud
Google Cloud Secret Manager
Segredos e certificados cloud
AWS Secrets Manager + KMS
Gestor de segredos e serviço de chaves
AWS Systems Manager Parameter Store
Arquivo gerido de parâmetros
Oracle Cloud Infrastructure Vault
Cofre cloud e segredos
HashiCorp Vault / OpenBao
Cofre empresarial de segredos
Alibaba Cloud KMS Secrets Manager
Segredos e certificados cloud
Huawei Cloud CSMS
Segredos e certificados cloud
IBM Cloud Secrets Manager
Segredos e certificados cloud
Kubernetes Secrets
Arquivo de segredos do cluster
SOPS encrypted files
Ficheiros de configuração cifrados
Ficheiros locais
Fonte local restrita de segredos
05Runtimes de processamento opcionais
Os fluxos Flower padrão permanecem declarativos e não exigem programação. Quando uma rota requer comportamento ou processamento personalizado, os runtimes opcionais JavaScript, Lua, WebAssembly, Starlark e AWK ampliam as capacidades do Flower sem acrescentar um serviço de computação externo. Starlark e AWK aplicam limites configurados de execução e dados: Starlark suporta lógica de regras determinística, enquanto AWK processa registos de texto, CSV e TSV em movimento.
JavaScript
Runtime JavaScript limitado
Lua
Runtime Lua isolado
WebAssembly
Módulos WebAssembly isolados
Starlark
Runtime determinístico limitado
AWK
Runtime limitado para texto, CSV e TSV
06Formatos em movimento
Descodifique, transforme, agregue, valide, encripte, comprima, transcodifique e volte a codificar formatos operacionais e analíticos enquanto se movimentam entre endpoints. Processe dados em movimento para entregar a forma necessária sem uma cadeia desnecessária de serviços externos.
CSV
Formato em movimento
JSON
Formato em movimento
Avro
Formato em movimento
Parquet
Formato em movimento
Excel
Formato em movimento
XML
Formato em movimento
CBOR
Formato em movimento
MessagePack
Formato em movimento
Fixed-width
Formato em movimento