由于 trendforge.devlive.top 访问受限，请切换到 trendforge.devlive.org 域名

data-pipeline

话题找到数量

apache/airflow

Python

Apache Airflow - 通过编程方式编写、调度和监控工作流的平台

airflow apache apache-airflow
apache
apache 开发者
45k
17k
891
+11
排名 #10
5月30日
查看详情

apache/shardingsphere

Java

通过分布式SQL为所有数据库提供分片、可扩展性和安全性，赋能数据智能。

bigdata data-encryption data-pipeline
apache
apache 开发者
20k
6.9k
910
+2
排名 #16
7月25日
查看详情

Unstructured-IO/unstructured

HTML

轻松将文档转换为结构化数据。Unstructured是开源的ETL解决方案，可将复杂文档转换为适合语言模型的整洁结构化格式。访问我们的网站了解企业级平台产品，支持生产级工作流、分区、增强、分块和嵌入。

data-pipelines deep-learning document-image-analysis
Unstructured-IO
Unstructured-IO 开发者
15k
1.3k
775
+9
排名 #3
8月5日
查看详情

apache/dolphinscheduler

Java

Apache DolphinScheduler是现代数据编排平台，通过低代码方式敏捷构建高性能工作流

airflow azkaban cloud-native
apache
apache 开发者
14k
5.1k
869
+20
排名 #4
7月26日
查看详情

debezium/debezium

Java

多种数据库的变更数据捕获功能。请在https://issues.redhat.com/browse/DBZ提交问题。

apache-kafka cdc change-data-capture
debezium
debezium 开发者
12k
3k
684
+2
排名 #8
8月1日
查看详情

snowplow/snowplow

Scala

客户数据基础设施领域的领导者

analytics data data-collection
snowplow
snowplow 开发者
7k
1.2k
216
+3
排名 #24
8月2日
查看详情

OpenDCAI/DataFlow

Python

借助基于最新大语言模型的算子与流水线轻松实现数据准备。

data data-agent data-cleaning
OpenDCAI
OpenDCAI 开发者
7k
881
189
+38
排名 #15
7月26日
查看详情

apache/flink-cdc

Java

Flink CDC 是一款流式数据集成工具

batch cdc change-data-capture
apache
apache 开发者
6.4k
2.1k
889
+2
排名 #19
4月29日
查看详情

bruin-data/ingestr

Go

ingestr 是一个命令行工具，可通过单条命令无缝地在任意数据库之间复制数据。

bigquery copy-database data-ingestion
bruin-data
bruin-data 开发者
3.7k
129
349
+30
排名 #10
6月5日
查看详情

AbsaOSS/pramen

Scala

运行在Apache Spark上的弹性数据管道框架

big-data data-pipeline etl
AbsaOSS
AbsaOSS 开发者
31
4
201
排名 #11
7月4日
查看详情
助手