Git Stars Git Stars

#data-engineering 저장소

152
총 리포지토리
727,632
총 별점
4,787
리포지토리당 평균 스타 수

저장소 총 152개

51
apache/hamilton

Apache Hamilton은 데이터 과학자와 엔지니어가 계보/추적 및 메타데이터를 인코딩하는 테스트 가능한 모듈식 자체 문서화 데이터 흐름을 정의하도록 돕습니다. 파이썬이 실행되는 모든 곳에서 실행되고 확장됩니다.

apache
⭐ 2,631 Jupyter Notebook 👤 apache Organization 🕐 업데이트됨 2026-11-16 📅 생성됨 2023-02-23
52
sodadata/soda-core

현대 데이터 스택을 위한 데이터 계약 엔진. https://www.soda.io

sodadata
⭐ 2,463 Python 👤 sodadata Organization 🕐 업데이트됨 2026-11-21 📅 생성됨 2020-12-14
53
metarank/metarank

기사, 목록, 검색 결과, 추천에 대한 로우 코드 머신러닝 개인화 순위 서비스로 사용자 참여를 향상시킵니다. 친근한 학습 순위 엔진

metarank
⭐ 2,461 Scala 👤 metarank Organization 🕐 업데이트됨 2026-10-06 📅 생성됨 2020-08-19
54
running-elephant/datart

Datart는 차세대 데이터 시각화 오픈 플랫폼입니다.

running-elephant
⭐ 2,288 TypeScript 👤 running-elephant Organization 🕐 업데이트됨 2025-02-10 📅 생성됨 2021-10-15
55
bytewax/bytewax

Python 스트림 처리

bytewax
⭐ 2,074 Python 👤 bytewax Organization 🕐 업데이트됨 2026-11-13 📅 생성됨 2022-02-04
56
data-engineering-community/data-engineering-wiki

데이터 엔지니어링을 배우기 가장 좋은 곳입니다. 데이터 엔지니어링 커뮤니티에서 만들고 유지 관리합니다.

data-engineering-community
⭐ 2,067 CSS 👤 data-engineering-community Organization 🕐 업데이트됨 2026-09-15 📅 생성됨 2021-05-04
57
getnao/nao

👾 nao는 오픈 소스 에이전틱 BI 1위입니다. (1) nao-core CLI로 컨텍스트를 만들고, (2) 모두가 사용할 수 있도록 nao 채팅 인터페이스를 배포하세요.

getnao
⭐ 2,034 TypeScript 👤 getnao Organization 🕐 업데이트됨 2026-11-20 📅 생성됨 2025-12-30
58
Datus-ai/Datus-agent

데이터 엔지니어링의 미래 — 현대적인 데이터 스택을 위한 CLI SQL 클라이언트로, 데이터에 대한 AI 네이티브 컨텍스트 엔지니어링을 가능하게 합니다.

Datus-ai
⭐ 1,932 Python 👤 Datus-ai Organization 🕐 업데이트됨 2026-11-20 📅 생성됨 2025-07-04
59
feathr-ai/feathr

Feathr – 엔터프라이즈를 위한 확장 가능하고 통합된 데이터 및 AI 엔지니어링 플랫폼

feathr-ai
⭐ 1,916 Scala 👤 feathr-ai Organization 🕐 업데이트됨 2024-04-04 📅 생성됨 2022-02-18
60
dbt-labs/dbt-utils

dbt 프로젝트를 위한 유틸리티 함수.

dbt-labs
⭐ 1,837 Makefile 👤 dbt-labs Organization 🕐 업데이트됨 2026-11-21 📅 생성됨 2017-07-16
61
kiwenlau/hadoop-cluster-docker

Docker 컨테이너 내에서 Hadoop 클러스터 실행

kiwenlau
⭐ 1,827 Shell 👤 kiwenlau User 🕐 업데이트됨 2024-07-01 📅 생성됨 2015-05-21
62
OBenner/data-engineering-interview-questions

2000개 이상의 데이터 엔지니어 면접 질문.

OBenner
⭐ 1,815 Python 👤 OBenner User 🕐 업데이트됨 2026-01-13 📅 생성됨 2021-08-08
63
Hiflylabs/awesome-dbt

엄선된 훌륭한 dbt 리소스 목록

Hiflylabs
⭐ 1,754 👤 Hiflylabs Organization 🕐 업데이트됨 2026-11-17 📅 생성됨 2021-10-09
64
benthecoder/yt-channels-DS-AI-ML-CS

데이터 과학, 데이터 엔지니어링, 머신 러닝, 딥 러닝, 컴퓨터 과학, 프로그래밍, 소프트웨어 엔지니어링 등을 다루는 180개 이상의 YouTube 채널 종합 목록입니다.

benthecoder
⭐ 1,732 👤 benthecoder User 🕐 업데이트됨 2026-07-19 📅 생성됨 2021-06-14
65
DataWithBaraa/sql-ultimate-course

무료 30시간 SQL 강좌 자료: SQL Server, MySQL, PostgreSQL용 데이터베이스, 41개 챕터의 모든 쿼리, 그리고 슬라이드.

DataWithBaraa
⭐ 1,711 TSQL 👤 DataWithBaraa User 🕐 업데이트됨 2026-11-06 📅 생성됨 2025-03-18
66
mlrun/mlrun

MLRun은 오픈 소스 MLOps 플랫폼으로, ML 애플리케이션의 라이프사이클 전반에 걸쳐 지속적인 ML 애플리케이션을 빠르게 구축하고 관리할 수 있습니다. MLRun은 개발 및 CI/CD 환경에 통합되어 프로덕션 데이터, ML 파이프라인 및 온라인 애플리케이션의 배포를 자동화합니다.

mlrun
⭐ 1,703 Python 👤 mlrun Organization 🕐 업데이트됨 2026-11-20 📅 생성됨 2019-09-01
67
Multiwoven/multiwoven

🔥🔥🔥 오픈 소스 Reverse ETL - hightouch 및 census의 대안.

Multiwoven
⭐ 1,685 Ruby 👤 Multiwoven Organization 🕐 업데이트됨 2026-11-18 📅 생성됨 2023-10-20
68
Kaelio/ktx

ktx는 데이터 및 분석 에이전트를 위한 실행 가능한 컨텍스트 계층입니다 🐙 Claude Code, Codex 또는 다른 AI 에이전트가 회사의 전체 컨텍스트를 바탕으로 분석 데이터베이스를 정확하게 쿼리할 수 있도록 합니다

Kaelio
⭐ 1,633 TypeScript 👤 Kaelio Organization 🕐 업데이트됨 2026-11-18 📅 생성됨 2026-05-10
69
kantord/just-dashboard

:bar_chart: :clipboard: YAML 또는 JSON 파일을 사용한 대시보드

kantord
⭐ 1,587 TypeScript 👤 kantord User 🕐 업데이트됨 2026-02-21 📅 생성됨 2018-01-18
70
quixio/quix-streams

Kafka를 위한 Python 스트리밍 데이터프레임

quixio
⭐ 1,582 Python 👤 quixio Organization 🕐 업데이트됨 2026-11-18 📅 생성됨 2022-11-17
71
JeffSackmann/tennis_atp

ATP 테니스 랭킹, 결과 및 통계

JeffSackmann
⭐ 1,577 👤 JeffSackmann User 🕐 업데이트됨 2026-06-08 📅 생성됨 2015-03-13
72
chenditc/investment_data

https://www.dolthub.com/repositories/chenditc/investment_data용 스크립트 및 문서

chenditc
⭐ 1,571 Python 👤 chenditc User 🕐 업데이트됨 2026-11-20 📅 생성됨 2022-07-19
73
slothflowlabs/duckle

자체 서버 또는 클라우드에 배포하는 오픈 소스 ETL/ELT입니다. DuckDB 기반으로 구축되었으며, 노코드/로우코드 시각적 파이프라인 또는 SQL, 446개 컴포넌트, dbt, CDC, 데이터 품질, 리버스 ETL, 데이터 계보, AI 에이전트를 위한 MCP를 제공합니다. 벤더 클라우드가 필요 없고 행 단위 과금도 없습니다.

slothflowlabs
⭐ 1,558 Rust 👤 slothflowlabs Organization 🕐 업데이트됨 2026-11-20 📅 생성됨 2026-05-21
74
duneanalytics/spellbook

Dune을 위한 SQL 뷰

duneanalytics
⭐ 1,529 Python 👤 duneanalytics Organization 🕐 업데이트됨 2026-11-21 📅 생성됨 2020-01-31
75
pyper-dev/pyper

간편한 동시성 파이썬

pyper-dev
⭐ 1,521 Python 👤 pyper-dev User 🕐 업데이트됨 2025-02-04 📅 생성됨 2024-05-22
76
pyjanitor-devs/pyjanitor

데이터 정리용 깔끔한 API. R 패키지 Janitor의 Python 구현

pyjanitor-devs
⭐ 1,500 Python 👤 pyjanitor-devs Organization 🕐 업데이트됨 2026-11-20 📅 생성됨 2018-03-04
77
ashishps1/awesome-engineering-articles

최고 기술 회사들의 300개 이상의 엔지니어링 블로그 아티클 큐레이션 컬렉션. 최고 엔지니어링 팀이 대규모로 실제 문제를 어떻게 해결하는지 배우세요.

ashishps1
⭐ 1,491 👤 ashishps1 User 🕐 업데이트됨 2026-03-01 📅 생성됨 2026-02-15
78
lvgalvao/data-engineering-roadmap

데이터 엔지니어링 및 AI 전문 직업 교육

lvgalvao
⭐ 1,451 Python 👤 lvgalvao User 🕐 업데이트됨 2026-05-12 📅 생성됨 2024-01-16
79
opendatadiscovery/odd-platform

최초의 오픈 소스 데이터 검색 및 관찰 가능성 플랫폼입니다. 데이터 실무자들의 업무를 쉽게 하여 귀하가 비즈니스에 집중할 수 있도록 합니다.

opendatadiscovery
⭐ 1,441 Java 👤 opendatadiscovery Organization 🕐 업데이트됨 2026-10-19 📅 생성됨 2021-07-07
80
GoogleCloudPlatform/data-science-on-gcp

소스 코드: Google Cloud Platform의 데이터 과학, Valliappa Lakshmanan, O'Reilly 2017

GoogleCloudPlatform
⭐ 1,432 Jupyter Notebook 👤 GoogleCloudPlatform Organization 🕐 업데이트됨 2026-02-20 📅 생성됨 2017-02-10
81
zapret-info/z-i

러시아 연방에서 필터링된 인터넷 주소 등록부

zapret-info
⭐ 1,388 👤 zapret-info User 🕐 업데이트됨 2025-10-01 📅 생성됨 2012-11-19
82
quiltdata/quilt

Quilt는 AWS상의 과학 데이터 관리 플랫폼으로, 팀과 AI가 깊이 버전 관리되고 맥락이 풍부한 데이터 패키지를 통해 데이터를 찾고, 신뢰하며, 재사용할 수 있도록 도와줍니다.

quiltdata
⭐ 1,373 TypeScript 👤 quiltdata Organization 🕐 업데이트됨 2026-11-21 📅 생성됨 2017-02-10
83
spark-examples/pyspark-examples

Python 언어로 된 PySpark RDD, DataFrame 및 Dataset 예제

spark-examples
⭐ 1,371 Python 👤 spark-examples Organization 🕐 업데이트됨 2025-12-07 📅 생성됨 2019-11-26
84
gtoonstra/etl-with-airflow

Airflow를 사용한 ETL 모범 사례, 예시와 함께

gtoonstra
⭐ 1,353 Shell 👤 gtoonstra User 🕐 업데이트됨 2024-09-25 📅 생성됨 2016-10-16
85
Sniper970119/dianping_spider

Dianping 크롤러 (전체 사이트 크롤링 가능, 동적 폰트 암호화 해결, OCR 아님). 지속적인 업데이트

Sniper970119
⭐ 1,329 Python 👤 Sniper970119 User 🕐 업데이트됨 2026-11-03 📅 생성됨 2021-01-22
86
Data-Learn/data-engineering

데이터 엔지니어링 시작하기

Data-Learn
⭐ 1,323 Python 👤 Data-Learn Organization 🕐 업데이트됨 2025-04-20 📅 생성됨 2020-05-14
87
bitol-io/open-data-contract-standard

Open Data Contract Standard (ODCS)의 본고장입니다.

bitol-io
⭐ 1,238 Shell 👤 bitol-io Organization 🕐 업데이트됨 2026-11-17 📅 생성됨 2023-06-27
88
abhishek-ch/around-dataengineering

데이터 엔지니어링 및 머신러닝 지식 허브

abhishek-ch
⭐ 1,140 Python 👤 abhishek-ch User 🕐 업데이트됨 2024-02-02 📅 생성됨 2020-09-18
89
daochenzha/data-centric-AI

정리되었지만 불완전한 데이터 중심 AI 리소스 목록입니다.

daochenzha
⭐ 1,138 👤 daochenzha User 🕐 업데이트됨 2024-06-26 📅 생성됨 2023-03-07
90
datacontract/datacontract-cli

Snowflake, Databricks, BigQuery, Kafka 및 15개 이상의 플랫폼을 위한 오픈소스 데이터 계약 테스트. Open Data Contract Standard(ODCS)를 기반으로 구축되었습니다. MIT 라이선스.

datacontract
⭐ 1,114 JavaScript 👤 datacontract Organization 🕐 업데이트됨 2026-11-18 📅 생성됨 2023-07-24
91
youngwookim/awesome-hadoop

놀랍도록 훌륭한 Hadoop 및 Hadoop 생태계 리소스 모음 목록

youngwookim
⭐ 1,113 👤 youngwookim User 🕐 업데이트됨 2024-05-07 📅 생성됨 2014-07-08
92
DataWithBaraa/sql-data-warehouse-project

두 개의 소스 시스템(CRM 및 ERP)에서 브론즈, 실버, 골드 계층을 거쳐 SQL Server에 데이터 웨어하우스를 구축하세요. 무료 전체 프로젝트의 파일 및 스크립트.

DataWithBaraa
⭐ 1,089 TSQL 👤 DataWithBaraa User 🕐 업데이트됨 2026-11-06 📅 생성됨 2024-12-30
93
JohnSnowLabs/spark-nlp-workshop

John Snow Labs의 Apache Spark용 NLP를 사용하는 공개 실행 가능한 예제.

JohnSnowLabs
⭐ 1,089 Jupyter Notebook 👤 JohnSnowLabs Organization 🕐 업데이트됨 2026-11-17 📅 생성됨 2018-08-20
94
mattm/sql-style-guide

깔끔하고 유지보수가 용이한 SQL 작성에 대한 주관적인 가이드.

mattm
⭐ 1,088 👤 mattm User 🕐 업데이트됨 2025-01-14 📅 생성됨 2019-03-27
95
nijikokun/generate-schema

🧞 JSON 개체를 MySQL, JSON 스키마, Mongoose, Google BigQuery, Swagger 등으로 변환합니다.

nijikokun
⭐ 1,067 JavaScript 👤 nijikokun User 🕐 업데이트됨 2024-01-30 📅 생성됨 2015-02-16
96
opendatadiscovery/awesome-data-catalogs

📙 훌륭한 데이터 카탈로그 및 관찰 가능성 플랫폼.

opendatadiscovery
⭐ 1,059 👤 opendatadiscovery Organization 🕐 업데이트됨 2025-08-14 📅 생성됨 2021-07-14
97
DataTalksClub/stock-markets-analytics-zoomcamp

주식 시장 분석 Zoomcamp 과정 자료

DataTalksClub
⭐ 1,052 Jupyter Notebook 👤 DataTalksClub Organization 🕐 업데이트됨 2026-10-30 📅 생성됨 2024-02-14
99
dataform-co/dataform

Dataform은 BigQuery에서 SQL 기반 데이터 작업을 관리하기 위한 프레임워크입니다.

dataform-co
⭐ 998 TypeScript 👤 dataform-co Organization 🕐 업데이트됨 2026-11-20 📅 생성됨 2018-09-03
100
estuary/flow

🌊 Estuary로 데이터 흐름을 관리하여 데이터가 있는 시스템에서 데이터가 _있기를 원하는_ 시스템으로 지속적으로 동기화하세요. 🌊

estuary
⭐ 995 Rust 👤 estuary Organization 🕐 업데이트됨 2026-11-21 📅 생성됨 2020-02-13