spark

Apache DolphinScheduler é uma plataforma de orquestração de fluxo de trabalho distribuída de código aberto com interfaces visuais DAG para gerenciar tarefas de dados complexas.

CloudCanal

Uma ferramenta de sincronização de dados de código aberto para binlog MySQL, permitindo captura e replicação de dados em tempo real.

flink

Apache Spark é um mecanismo unificado para análise de dados em grande escala, com suporte para processamento em lote e streaming, consultas SQL e aprendizado de máquina em vários idiomas.

druid

Apache Storm é um sistema de computação distribuído em tempo real gratuito e de código aberto para processamento de fluxos de dados ilimitados, escalonável e tolerante a falhas.

datax

FlinkX, renomeado para chunjun, é uma ferramenta de integração de big data de código aberto baseada em Flink, projetada para sincronização e processamento eficiente de dados.

Sqoop

Apache Sqoop é uma ferramenta para transferência eficiente de dados em massa entre Hadoop e bancos de dados relacionais, agora descontinuada.

storm

Apache Flink é um mecanismo de processamento distribuído para cálculos com estado em fluxos de dados, projetado para alto desempenho e escalabilidade em todos os ambientes de cluster.

TEZ

Apache Tez é uma estrutura de aplicativo para a construção de tarefas complexas de gráficos acíclicos direcionados para processamento de dados, construída no Apache Hadoop YARN.

Waterdrop

Sqoop é uma ferramenta para transferência eficiente de dados em massa entre bancos de dados relacionais e Hadoop HDFS, projetada para fluxos de trabalho de big data.

Chunjun

MinIO AIStor é um armazenamento de objetos em exascale para IA, oferecendo compatibilidade S3, alto desempenho e confiabilidade de nível empresarial para cargas de trabalho com uso intensivo de dados.

canal

Uma plataforma de streaming de dados totalmente gerenciada baseada em Apache Kafka, que oferece escalabilidade elástica, segurança empresarial, processamento de fluxo e governança para pipelines de dados em tempo real.