Git Stars Git Stars

#etl 저장소

105
총 리포지토리
408,616
총 별점
3,891
리포지토리당 평균 스타 수

저장소 총 105개

51
datavane/tis

Web UI를 통해 Flink, DataX 및 Flink-CDC 기반의 애자일 온톨로지 DataOps 지원

datavane
⭐ 1,448 Java 👤 datavane Organization 🕐 업데이트됨 2026-11-20 📅 생성됨 2019-01-23
52
toluaina/pgsync

Postgres, MySQL 또는 MariaDB에서 Elasticsearch/OpenSearch로 동기화

toluaina
⭐ 1,433 Python 👤 toluaina User 🕐 업데이트됨 2026-11-20 📅 생성됨 2019-08-17
53
xitongsys/parquet-go

파라켓 파일 읽기/쓰기를 위한 순수 Golang 라이브러리

xitongsys
⭐ 1,432 Go 👤 xitongsys User 🕐 업데이트됨 2026-05-08 📅 생성됨 2017-09-02
54
amphi-ai/amphi-etl

Python으로 구동되는 시각적 데이터 준비

amphi-ai
⭐ 1,410 TypeScript 👤 amphi-ai Organization 🕐 업데이트됨 2026-08-24 📅 생성됨 2024-03-20
55
spark-examples/pyspark-examples

Python 언어로 된 PySpark RDD, DataFrame 및 Dataset 예제

spark-examples
⭐ 1,371 Python 👤 spark-examples Organization 🕐 업데이트됨 2025-12-07 📅 생성됨 2019-11-26
56
gtoonstra/etl-with-airflow

Airflow를 사용한 ETL 모범 사례, 예시와 함께

gtoonstra
⭐ 1,353 Shell 👤 gtoonstra User 🕐 업데이트됨 2024-09-25 📅 생성됨 2016-10-16
57
yhat/pandasql

pandas용 sqldf

yhat
⭐ 1,351 Python 👤 yhat Organization 🕐 업데이트됨 2024-07-24 📅 생성됨 2013-02-18
58
subsquid/squid-sdk

SQD Network에서 제공하는 Ethereum, Solana 및 Substrate 데이터 인덱싱을 위한 TypeScript ETL 툴킷.

subsquid
⭐ 1,347 TypeScript 👤 subsquid Organization 🕐 업데이트됨 2026-11-20 📅 생성됨 2021-12-10
59
singer-io/getting-started

이 저장소는 Singer에 대한 시작 가이드입니다.

singer-io
⭐ 1,342 Makefile 👤 singer-io Organization 🕐 업데이트됨 2025-08-08 📅 생성됨 2016-10-31
60
rwynn/monstache

실시간으로 MongoDB를 Elasticsearch로 동기화하는 Go 데몬. 검색을 위해, 알지?

rwynn
⭐ 1,331 Go 👤 rwynn User 🕐 업데이트됨 2025-08-22 📅 생성됨 2016-05-14
61
2ndQuadrant/pglogical

PostgreSQL 17, 16, 15, 14, 13, 12, 11, 10, 9.6, 9.5, 9.4 (Postgres)용 논리 복제 확장 프로그램으로, Slony, Bucardo 또는 Londiste보다 훨씬 빠른 복제를 제공하며, 버전 간 업그레이드도 지원합니다.

2ndQuadrant
⭐ 1,243 C 👤 2ndQuadrant Organization 🕐 업데이트됨 2026-07-28 📅 생성됨 2016-05-10
62
react-csv/react-csv

데이터의 Array/리터럴 객체를 기반으로 CSV 파일을 즉석에서 구축하는 React 컴포넌트

react-csv
⭐ 1,182 JavaScript 👤 react-csv Organization 🕐 업데이트됨 2024-04-03 📅 생성됨 2016-11-25
63
DataWithBaraa/sql-data-warehouse-project

두 개의 소스 시스템(CRM 및 ERP)에서 브론즈, 실버, 골드 계층을 거쳐 SQL Server에 데이터 웨어하우스를 구축하세요. 무료 전체 프로젝트의 파일 및 스크립트.

DataWithBaraa
⭐ 1,089 TSQL 👤 DataWithBaraa User 🕐 업데이트됨 2026-11-06 📅 생성됨 2024-12-30
64
jf-tech/omniparser

omniparser: CSV, JSON, XML, EDI, 텍스트 등을 위한 네이티브 Golang ETL 스트리밍 파서 및 변환 라이브러리

jf-tech
⭐ 1,085 Go 👤 jf-tech User 🕐 업데이트됨 2026-10-11 📅 생성됨 2020-08-16
65
dataform-co/dataform

Dataform은 BigQuery에서 SQL 기반 데이터 작업을 관리하기 위한 프레임워크입니다.

dataform-co
⭐ 998 TypeScript 👤 dataform-co Organization 🕐 업데이트됨 2026-11-20 📅 생성됨 2018-09-03
66
estuary/flow

🌊 Estuary로 데이터 흐름을 관리하여 데이터가 있는 시스템에서 데이터가 _있기를 원하는_ 시스템으로 지속적으로 동기화하세요. 🌊

estuary
⭐ 995 Rust 👤 estuary Organization 🕐 업데이트됨 2026-11-21 📅 생성됨 2020-02-13
67
uniVocity/univocity-parsers

uniVocity-parsers는 Java를 위한 매우 빠르고 안정적인 파서 모음입니다. 다양한 파일 형식을 처리하기 위한 일관된 인터페이스와 새로운 파서를 개발하기 위한 견고한 프레임워크를 제공합니다.

uniVocity
⭐ 931 Java 👤 uniVocity Organization 🕐 업데이트됨 2024-08-17 📅 생성됨 2014-07-12
68
slingdata-io/sling-cli

Sling은 원본 저장소/데이터베이스에서 데이터를 추출하여 대상 저장소/데이터베이스로 로드하는 CLI 도구입니다.

slingdata-io
⭐ 926 Go 👤 slingdata-io Organization 🕐 업데이트됨 2026-11-20 📅 생성됨 2020-10-15
69
flow-php/flow

확장 가능한 데이터 처리 파이프라인을 구축하고 다양한 데이터 소스와 대상 간에 데이터를 이동할 수 있는 가장 진보된 데이터 처리 프레임워크입니다.

flow-php
⭐ 875 PHP 👤 flow-php Organization 🕐 업데이트됨 2026-11-20 📅 생성됨 2021-05-23
70
NeumTry/NeumAI

Neum AI는 대규모 벡터 임베딩의 생성 및 동기화를 관리하는 최고 수준의 프레임워크입니다.

NeumTry
⭐ 864 Python 👤 NeumTry Organization 🕐 업데이트됨 2024-01-15 📅 생성됨 2023-09-14
71
Cinchoo/ChoETL

.NET용 ETL 프레임워크 (CSV, Flat, Xml, JSON, Key-Value, Parquet, Yaml, Avro 형식 파일용 Parser / Writer)

Cinchoo
⭐ 860 C# 👤 Cinchoo User 🕐 업데이트됨 2026-10-19 📅 생성됨 2016-10-19
72
aelassas/wexflow

워크플로 자동화 엔진

aelassas
⭐ 845 C# 👤 aelassas User 🕐 업데이트됨 2026-11-16 📅 생성됨 2022-10-29
73
awslabs/python-deequ

Deequ용 Python API

awslabs
⭐ 826 Jupyter Notebook 👤 awslabs Organization 🕐 업데이트됨 2026-10-24 📅 생성됨 2020-11-09
74
pgflo/pg_flo

PostgreSQL 데이터를 실시간으로 스트리밍, 변환 및 라우팅합니다.

pgflo
⭐ 825 Go 👤 pgflo Organization 🕐 업데이트됨 2025-12-29 📅 생성됨 2024-09-02
75
paillave/Etl.Net

.NET 개발자를 위한 완전한 ETL을 사용한 대량 데이터 처리

paillave
⭐ 812 C# 👤 paillave User 🕐 업데이트됨 2026-10-09 📅 생성됨 2018-06-23
76
BasPH/data-pipelines-with-apache-airflow

Apache Airflow를 사용한 데이터 파이프라인 코드

BasPH
⭐ 810 Python 👤 BasPH User 🕐 업데이트됨 2024-08-15 📅 생성됨 2019-06-10
77
kzaremski/apple-notes-exporter

Apple 메모(iCloud 메모 포함)를 폴더 구조를 유지하면서 다양한 형식으로 일괄 내보내는 Swift 기반의 macOS 앱.

kzaremski
⭐ 780 Swift 👤 kzaremski User 🕐 업데이트됨 2026-09-19 📅 생성됨 2023-02-15
78
raystack/optimus

Optimus는 데이터 변환, 데이터 모델링, 파이프라인 및 데이터 품질 관리를 위한 사용하기 쉽고 안정적이며 성능이 뛰어난 워크플로우 오케스트레이터입니다.

raystack
⭐ 757 Go 👤 raystack Organization 🕐 업데이트됨 2024-06-08 📅 생성됨 2021-03-22
79
microsoft/etl2pcapng

Windows 네트워크 패킷 캡처를 포함하는 .etl 파일을 .pcapng 형식으로 변환하는 유틸리티.

microsoft
⭐ 718 C 👤 microsoft Organization 🕐 업데이트됨 2025-06-05 📅 생성됨 2019-09-16
80
koopjs/koop

웹에서 공간 데이터를 변환, 쿼리 및 다운로드합니다.

koopjs
⭐ 715 JavaScript 👤 koopjs Organization 🕐 업데이트됨 2026-11-16 📅 생성됨 2013-07-20
81
neuml/paperetl

📄 ⚙️ 의료 및 과학 논문의 ETL 프로세스

neuml
⭐ 701 Python 👤 neuml Organization 🕐 업데이트됨 2025-12-07 📅 생성됨 2020-07-10
82
awslabs/aws-glue-libs

AWS Glue 라이브러리는 ETL 작업을 위한 Spark에 대한 추가 기능 및 향상 사항입니다.

awslabs
⭐ 701 Python 👤 awslabs Organization 🕐 업데이트됨 2026-10-30 📅 생성됨 2017-08-11
83
elastic/eland

Elasticsearch에서 DataFrames, 빅 데이터, 머신 러닝 및 ETL을 위한 Python 클라이언트 및 툴킷

elastic
⭐ 693 Python 👤 elastic Organization 🕐 업데이트됨 2026-06-16 📅 생성됨 2019-06-11
84
tableau/webdataconnector

중요한 데이터를 Tableau로 가져오세요

tableau
⭐ 688 HTML 👤 tableau Organization 🕐 업데이트됨 2026-10-19 📅 생성됨 2015-10-12
85
dbt-labs/dbt-codegen

dbt 코드를 생성하는 매크로

dbt-labs
⭐ 677 Makefile 👤 dbt-labs Organization 🕐 업데이트됨 2026-10-01 📅 생성됨 2019-06-10
86
datacleaner/DataCleaner

최고의 오픈 소스 데이터 품질 솔루션

datacleaner
⭐ 646 Java 👤 datacleaner Organization 🕐 업데이트됨 2026-11-15 📅 생성됨 2014-02-20
87
catalyst-cooperative/pudl

공공 유틸리티 데이터 해방 프로젝트는 기후 옹호자, 연구원, 정책 입안자, 기자들에게 분석 준비된 에너지 시스템 데이터를 제공합니다.

catalyst-cooperative
⭐ 621 Python 👤 catalyst-cooperative Organization 🕐 업데이트됨 2026-11-21 📅 생성됨 2017-02-01
88
josephmachado/beginner_de_project

초급 데이터 엔지니어링 프로젝트 - 배치 버전

josephmachado
⭐ 620 HTML 👤 josephmachado User 🕐 업데이트됨 2026-04-13 📅 생성됨 2020-05-23
89
ConduitIO/conduit

Conduit는 데이터 저장소 간에 데이터를 스트리밍합니다. Kafka Connect 대체. JVM이 필요 없습니다.

ConduitIO
⭐ 617 Go 👤 ConduitIO Organization 🕐 업데이트됨 2026-11-21 📅 생성됨 2022-01-11
90
apecloud/ape-dts

Rust로 작성된 ApeCloud의 데이터 전송 스위트. MySQL, PostgreSQL, Redis, MongoDB, Kafka 및 ClickHouse 간의 초고속 데이터 복제를 제공하며, 재해 복구(DR) 및 마이그레이션 시나리오에 이상적입니다.

apecloud
⭐ 616 Rust 👤 apecloud Organization 🕐 업데이트됨 2026-11-20 📅 생성됨 2023-01-12
91
insitro/redun

또 다른 중복 워크플로 엔진

insitro
⭐ 610 Python 👤 insitro Organization 🕐 업데이트됨 2026-11-18 📅 생성됨 2021-11-04
92
aryn-ai/sycamore

Sycamore는 비정형 데이터를 위한 LLM 기반 검색 및 분석 플랫폼입니다.

aryn-ai
⭐ 605 Python 👤 aryn-ai Organization 🕐 업데이트됨 2026-08-01 📅 생성됨 2023-07-07
93
Datavault-UK/automate-dv

Data Vault 2.0 준수 데이터 웨어하우스를 생성하고 로드하기 위한 무료 dbt 패키지 (dbt, 오픈 소스 데이터 엔지니어링 도구, dbt Labs의 등록 상표에 의해 구동됨)

Datavault-UK
⭐ 599 👤 Datavault-UK Organization 🕐 업데이트됨 2026-02-05 📅 생성됨 2019-09-27
94
YotpoLtd/metorikku

Apache Spark 기반의 간소화된 경량 ETL 프레임워크

YotpoLtd
⭐ 589 Scala 👤 YotpoLtd Organization 🕐 업데이트됨 2026-09-01 📅 생성됨 2017-10-10
95
singer-io/singer-python

Python에서 Singer 형식 작성

singer-io
⭐ 585 Python 👤 singer-io Organization 🕐 업데이트됨 2026-11-02 📅 생성됨 2016-10-28
96
taz4et/bitcoin-etl

비트코인 블록체인 데이터를 추출하고 구조화된 형식으로 변환하기 위한 Python 툴킷.

taz4et
⭐ 580 Python 👤 taz4et User 🕐 업데이트됨 2025-11-24 📅 생성됨 2025-11-14
97
stn1slv/awesome-integration

뛰어난 시스템 통합 소프트웨어 및 리소스 큐레이션 목록입니다.

stn1slv
⭐ 572 Markdown 👤 stn1slv User 🕐 업데이트됨 2026-11-21 📅 생성됨 2021-07-23
98
JoeyBling/webkettle

웹 버전 Kettle을 기반으로 개발된 분산형 종합 스케줄링, 관리, ETL 개발 사용자 전문 버전 B/S 아키텍처 도구

JoeyBling
⭐ 572 JavaScript 👤 JoeyBling User 🕐 업데이트됨 2024-06-25 📅 생성됨 2018-05-23
99
pracdata/awesome-open-source-data-engineering

분석 플랫폼 및 데이터 엔지니어링 생태계에서 사용되는 오픈 소스 도구의 큐레이션된 목록

pracdata
⭐ 564 👤 pracdata Organization 🕐 업데이트됨 2025-03-12 📅 생성됨 2024-02-22
100
vlm-run/vlmrun-hub

VLMs와 함께 사용할 수 있는 다양한 산업별 스키마 허브.

vlm-run
⭐ 555 Python 👤 vlm-run Organization 🕐 업데이트됨 2025-12-15 📅 생성됨 2024-11-11