#etl 仓库
探索 105 个标记为 #etl 的活跃开源 GitHub 仓库,它们累计获得 408,616 个 Star(平均每个项目 3,891 个)。该主题的领先项目是 pathwaycom/pathway,拥有 61,976 个 Star。
共 105 个仓库
随时随地,编排一切。面向数据、基础设施、业务流程和 AI 智能体工作流的开源控制平面。采用声明式 YAML、事件驱动,支持任意语言、Git 版本管理,可扩展至数百万次执行。
用于云配置和安全数据的数据管道。构建云资产清单、CSPM、FinOps 和漏洞管理解决方案。从 AWS、Azure、GCP 以及 70 多个云和 SaaS 源提取数据。
DataX集成可视化页面,选择数据源即可一键生成数据同步任务,支持RDBMS、Hive、HBase、ClickHouse、MongoDB等数据源,批量创建RDBMS数据同步任务,集成开源调度系统,支持分布式、增量同步数据、实时查看运行日志、监控执行器资源、KILL运行进程、数据源信息加密等。
AWS 上的 pandas - 与 Athena、Glue、Redshift、Timestream、Neptune、OpenSearch、QuickSight、Chime、CloudWatchLogs、DynamoDB、EMR、SecretManager、PostgreSQL、MySQL、SQLServer 和 S3 (Parquet、CSV、JSON 和 EXCEL) 的轻松集成。
用于以太坊区块、交易、ERC20/ERC721代币、转账、收据、日志、合约、内部交易的ETL(提取、转换和加载)作业的Python脚本。数据可在Google BigQuery中获取 https://goo.gl/oY5BCQ
Apache Hamilton 帮助数据科学家和工程师定义可测试、模块化、自文档化的数据流,这些数据流编码血缘/跟踪和元数据。可在 Python 运行的所有地方运行和扩展。
集成于单个 C++ 二进制文件中的最快统一流式 SQL 引擎。⚡ 毫秒级延迟。吞吐量超过 100 GB/s。持续从流、日志、指标、事件和 CDC 中计算有状态上下文。
OLake Go:一款开源工具,可将数据库、Kafka 和 S3 中的数据复制到 Apache Iceberg 和 Parquet。数据源:Postgres、MySQL、MongoDB、Oracle、MSSQL、DB2、Kafka、S3。原名 datazip-inc/olake。表维护功能位于 datazip-inc/olake-fusion。
可部署在自有服务器或云端的开源 ETL/ELT。基于 DuckDB 构建:支持无代码/低代码可视化管道或 SQL、446 个组件、dbt、CDC、数据质量、反向 ETL、数据血缘,以及面向 AI 智能体的 MCP。无厂商云,无按行计费。
常见问题解答
GitHub 上最受欢迎的 #etl 仓库是什么?
GitHub 上排名第一的开源 #etl 项目是 pathwaycom/pathway,拥有 61,976 个 Star。用于流处理、实时分析、LLM管道和RAG的Python ETL框架。
#etl 仓库中最常使用的编程语言有哪些?
在 GitHub 上排名靠前的 #etl 项目中,最常见的编程语言是 Python, Java, Go, Rust。
#etl 仓库的排名是如何计算的?
我们跟踪了 105 个标记为 #etl 且拥有 500+ 个 Star 的活跃开源仓库,共计获得 408,616 个 Star,平均每个仓库拥有 3,891 个 Star。排名每日根据 GitHub API 更新。