Git Stars Git Stars

#spark 저장소

#spark 태그가 지정된 GitHub의 활성 오픈 소스 저장소 126개를 확인해 보세요. 총 513,269개의 스타를 획득했으며 프로젝트당 평균 4,073개입니다. 이 주제를 이끄는 저장소는 46,997개의 스타를 받은 DataTalksClub/data-engineering-zoomcamp입니다.

126
총 리포지토리
513,269
총 별점
4,073
리포지토리당 평균 스타 수

저장소 총 126개

1
DataTalksClub/data-engineering-zoomcamp

Data Engineering Zoomcamp는 프로덕션 레디 데이터 파이프라인 구축에 관한 9주 무료 코스입니다. 여기서 코스에 참여하세요 👇🏼

DataTalksClub
⭐ 46,997 Jupyter Notebook 👤 DataTalksClub Organization 🕐 업데이트됨 2026-11-16 📅 생성됨 2021-10-21
2
apache/spark

Apache Spark - 대규모 데이터 처리를 위한 통합 분석 엔진

apache
⭐ 44,593 Scala 👤 apache Organization 🕐 업데이트됨 2026-11-21 📅 생성됨 2014-02-25
3
getredash/redash

귀사의 데이터를 기반으로 데이터를 운영하십시오. 모든 데이터 소스에 연결하고, 쉽게 시각화하고, 대시보드를 구성하고, 데이터를 공유하십시오.

getredash
⭐ 28,895 TypeScript 👤 getredash Organization 🕐 업데이트됨 2026-11-14 📅 생성됨 2013-10-28
4
donnemartin/data-science-ipython-notebooks

데이터 과학 파이썬 노트북: 딥러닝(TensorFlow, Theano, Caffe, Keras), scikit-learn, Kaggle, 빅데이터(Spark, Hadoop MapReduce, HDFS), matplotlib, pandas, NumPy, SciPy, 파이썬 필수, AWS 및 다양한 커맨드 라인.

donnemartin
⭐ 28,776 Python 👤 donnemartin User 🕐 업데이트됨 2024-03-20 📅 생성됨 2015-01-23
5
yeasy/docker_practice

최신 Docker 컨테이너 기술, 실제 사례에서 베스트 프랙티스를 배워보세요! | Docker&Container 기술을 배우고, 실제 DevOps 실습을 이해하세요!

yeasy
⭐ 26,382 Go 👤 yeasy User 🕐 업데이트됨 2026-11-11 📅 생성됨 2014-09-05
6
heibaiying/BigData-Notes

빅데이터 입문 가이드 :star:

heibaiying
⭐ 16,818 Java 👤 heibaiying User 🕐 업데이트됨 2024-01-05 📅 생성됨 2019-03-10
7
FavioVazquez/ds-cheatsheets

세계를 정복할 데이터 과학 치트시트 목록

FavioVazquez
⭐ 15,921 👤 FavioVazquez User 🕐 업데이트됨 2024-07-18 📅 생성됨 2018-12-20
8
GaiZhenbiao/ChuanhuChatGPT

ChatGPT API 및 다중 LLM을 위한 GUI. 에이전트, 파일 기반 QA, GPT 파인튜닝 및 웹 검색 쿼리를 지원합니다. 깔끔한 UI로 모든 것을 제공합니다.

GaiZhenbiao
⭐ 15,237 Python 👤 GaiZhenbiao User 🕐 업데이트됨 2026-09-16 📅 생성됨 2023-03-02
9
zhisheng17/flink-learning

플링크 학습 블로그. http://www.54tianzhisheng.cn/ Flink 입문, 개념, 원리, 실전, 성능 튜닝, 소스 코드 분석 등의 내용을 포함합니다. Flink Connector, Metrics, Library, DataStream API, Table API & SQL 등의 학습 사례를 다루며, Flink 실제 적용 대형 프로젝트 사례(PVUV, 로그 저장, 100억 데이터 실시간 중복 제거, 모니터링 알림) 공유. 제 칼럼 《빅데이터 실시간 컴퓨팅 엔진 Flink 실전과 성능 최적화》 지원을 환영합니다.

zhisheng17
⭐ 15,109 Java 👤 zhisheng17 User 🕐 업데이트됨 2026-05-06 📅 생성됨 2019-01-01
10
aalansehaiyang/technology-talk

【대기업 면접 전문 코너】 Java 프로그래머가 필요한 기술 가이드, 여기에는 면접 질문, 시스템 아키텍처, 직장 팁, 주요 미들웨어 등이 있으며, 더 멋진 자신으로 성장하세요!

aalansehaiyang
⭐ 14,717 👤 aalansehaiyang User 🕐 업데이트됨 2025-07-21 📅 생성됨 2016-06-10
11
horovod/horovod

TensorFlow, Keras, PyTorch 및 Apache MXNet을 위한 분산 훈련 프레임워크.

horovod
⭐ 14,695 Python 👤 horovod Organization 🕐 업데이트됨 2026-06-20 📅 생성됨 2017-08-09
12
deeplearning4j/deeplearning4j

JVM을 사용하여 딥러닝 모델을 배포하고 훈련하기 위한 도구 모음입니다. Keras, TensorFlow 및 ONNX/PyTorch용 모델 가져오기, 수학 코드를 실행하기 위한 모듈식의 작은 C++ 라이브러리, 핵심 C++ 라이브러리 위에 구축된 Java 기반 수학 라이브러리가 포함됩니다. 또한 SameDiff: 딥 러닝 실행을 위한 PyTorch/TensorFlow와 유사한 라이브러리가 포함되어 있습니다...

deeplearning4j
⭐ 14,283 Java 👤 deeplearning4j Organization 🕐 업데이트됨 2026-10-05 📅 생성됨 2013-11-27
13
tobymao/sqlglot

Python SQL 파서 및 트랜스파일러

tobymao
⭐ 9,809 Python 👤 tobymao User 🕐 업데이트됨 2026-11-21 📅 생성됨 2021-03-13
14
delta-io/delta

Spark, PrestoDB, Flink, Trino 및 Hive를 포함한 컴퓨트 엔진과 API를 사용하여 Lakehouse 아키텍처를 구축할 수 있게 하는 오픈 소스 저장 프레임워크

delta-io
⭐ 9,083 Scala 👤 delta-io Organization 🕐 업데이트됨 2026-11-21 📅 생성됨 2019-04-22
15
mage-ai/mage-ai

🧙 데이터 통합 및 변환을 위한 데이터 파이프라인을 구축, 실행 및 관리합니다.

mage-ai
⭐ 8,850 Python 👤 mage-ai Organization 🕐 업데이트됨 2026-11-20 📅 생성됨 2022-05-16
16
h2oai/h2o-3

H2O는 오픈 소스, 분산형, 빠르고 확장 가능한 머신러닝 플랫폼입니다: 딥러닝, 그래디언트 부스팅(GBM) & XGBoost, 랜덤 포레스트, 일반화 선형 모델(탄력망 포함 GLM), K-평균, PCA, 일반화 가법 모델(GAM), RuleFit, 서포트 벡터 머신(SVM), 스태킹 앙상블, 자동화 머신러닝(AutoML) 등

h2oai
⭐ 7,527 Jupyter Notebook 👤 h2oai Organization 🕐 업데이트됨 2026-11-11 📅 생성됨 2014-03-03
17
Alluxio/alluxio

Alluxio, 클라우드에서의 분석 및 머신러닝을 위한 데이터 오케스트레이션

Alluxio
⭐ 7,264 Java 👤 Alluxio Organization 🕐 업데이트됨 2026-09-01 📅 생성됨 2012-12-21
18
Angel-ML/angel

대규모 머신러닝을 위한 유연하고 강력한 파라미터 서버

Angel-ML
⭐ 6,797 Java 👤 Angel-ML Organization 🕐 업데이트됨 2026-11-19 📅 생성됨 2017-04-25
19
apache/zeppelin

SQL, Scala 등을 사용한 데이터 주도적이고 상호작용적인 데이터 분석 및 협업 문서를 가능하게 하는 웹 기반 노트북.

apache
⭐ 6,670 Java 👤 apache Organization 🕐 업데이트됨 2026-11-20 📅 생성됨 2015-03-25
20
microsoft/SynapseML

Spark용 ML 알고리즘을 포팅하는 간단하고 분산된 머신 러닝 Python 라이브러리

microsoft
⭐ 5,257 Scala 👤 microsoft Organization 🕐 업데이트됨 2026-11-18 📅 생성됨 2017-06-05
21
tencentmusic/cube-studio

cube studio 오픈소스 클라우드 네이티브 올인원 머신러닝/딥러닝/대규모 모델 AI 플랫폼, MLOps 알고리즘 링크 전체 프로세스, 컴퓨팅 파워 대여 플랫폼, 노트북 온라인 개발, 드래그 앤 드롭 작업 흐름 파이프라인 오케스트레이션, 다중 머신 다중 GPU 분산 학습, 하이퍼파라미터 검색, 추론 서비스 VGPU 가상화, 엣지 컴퓨팅, 주석 플랫폼 자동화 주석, Deepseek 등 대규모 모델 SFT 미세 조정/보상 모델/강화 학습 훈련, vLLM/Ollama/MindSpore 등 대규모 모델 다중 머신 추론, 비공개 지식 베이스, AI 모델 마켓, 국산 CPU/GPU/NPU Ascend 생태계 지원, RDMA 지원, PyTorch/TF/MXNet/DeepSpeed/Paddle/ColossalAI/Horovod/Ray/Volcano 등 분산 지원

tencentmusic
⭐ 5,085 👤 tencentmusic Organization 🕐 업데이트됨 2026-10-09 📅 생성됨 2021-08-17
22
apache/streampark

실시간 데이터를 위한 개방형 컨트롤 플레인

apache
⭐ 4,352 Java 👤 apache Organization 🕐 업데이트됨 2026-10-31 📅 생성됨 2019-05-27
23
JohnSnowLabs/spark-nlp

최첨단 자연어 처리

JohnSnowLabs
⭐ 4,162 Scala 👤 JohnSnowLabs Organization 🕐 업데이트됨 2026-11-14 📅 생성됨 2017-09-24
24
RoaringBitmap/RoaringBitmap

Java에서 더 나은 압축 비트셋: Apache Spark, Netflix Atlas, Apache Pinot, Tablesaw 및 기타 여러 곳에서 사용

RoaringBitmap
⭐ 3,957 Java 👤 RoaringBitmap Organization 🕐 업데이트됨 2026-11-14 📅 생성됨 2013-06-17
25
Cyb3rWard0g/HELK

사냥하는 엘크

Cyb3rWard0g
⭐ 3,901 Jupyter Notebook 👤 Cyb3rWard0g User 🕐 업데이트됨 2024-06-01 📅 생성됨 2017-03-14
26
awslabs/deequ

Deequ는 Apache Spark 위에 구축된 라이브러리로, 대규모 데이터셋의 데이터 품질을 측정하는 "데이터 단위 테스트"를 정의합니다.

awslabs
⭐ 3,660 Scala 👤 awslabs Organization 🕐 업데이트됨 2026-10-20 📅 생성됨 2018-08-07
27
lakehq/sail

Rust로 작성된 Apache Spark의 즉시 교체 가능한 대체재로, 배치 처리, 스트림 처리 및 컴퓨트 집약적 AI 워크로드를 통합합니다.

lakehq
⭐ 3,504 Rust 👤 lakehq Organization 🕐 업데이트됨 2026-11-21 📅 생성됨 2023-12-21
28
liyupi/sql-generator

🔨 Vue3 + TypeScript + Vite + Ant Design + MonacoEditor 기반으로 JSON을 사용하여 구조화된 SQL 문 생성, 프로젝트는 간단함(논리 중시, 페이지 경량)하여 연습에 적합합니다~

liyupi
⭐ 3,455 Vue 👤 liyupi User 🕐 업데이트됨 2024-01-17 📅 생성됨 2022-05-12
29
apache/paimon

Apache Paimon은 스트리밍 및 배치 작업을 위해 Flink 및 Spark를 사용하여 Realtime Lakehouse 아키텍처를 구축할 수 있도록 하는 레이크 형식입니다.

apache
⭐ 3,454 Java 👤 apache Organization 🕐 업데이트됨 2026-11-21 📅 생성됨 2022-01-12
30
apache/linkis

Apache Linkis는 상위 애플리케이션과 하위 데이터 엔진 간의 연결, 거버넌스 및 오케스트레이션을 용이하게 하기 위해 계산 미들웨어 레이어를 구축합니다.

apache
⭐ 3,417 Java 👤 apache Organization 🕐 업데이트됨 2026-11-04 📅 생성됨 2019-07-23
31
databricks/koalas

코알라스: Apache Spark상의 pandas API

databricks
⭐ 3,368 Python 👤 databricks Organization 🕐 업데이트됨 2024-03-20 📅 생성됨 2019-01-03
32
WeBankFinTech/DataSphereStudio

DataSphereStudio는 데이터 애플리케이션 개발 및 관리 포털의 원스톱 솔루션으로, 데이터 교환, 탈감작/정제, 분석/채굴, 품질 측정, 시각화, 작업 스케줄링 등의 시나리오를 포괄합니다.

WeBankFinTech
⭐ 3,275 Java 👤 WeBankFinTech Organization 🕐 업데이트됨 2025-11-04 📅 생성됨 2019-11-24
33
lakesoul-io/LakeSoul

에이전트를 위한 오픈 레이크하우스 엔진 — Postgres, 벡터, Python을 네이티브로 지원합니다. PostgreSQL을 사용하고, 사용자의 오브젝트 스토리지에서 실행되며, Rust로 작성되었습니다.

lakesoul-io
⭐ 3,261 Rust 👤 lakesoul-io Organization 🕐 업데이트됨 2026-11-21 📅 생성됨 2021-12-28
34
MoRan1607/BigDataGuide

빅데이터 학습, 빅데이터를 제로부터 시작해 배우기, 빅데이터 학습 각 단계의 학습 비디오 및 면접 자료 포함

MoRan1607
⭐ 3,259 👤 MoRan1607 User 🕐 업데이트됨 2026-01-20 📅 생성됨 2019-11-30
35
kubeflow/spark-operator

Kubernetes에서 Apache Spark 애플리케이션의 라이프사이클을 관리하기 위한 Kubernetes 오퍼레이터.

kubeflow
⭐ 3,162 Python 👤 kubeflow Organization 🕐 업데이트됨 2026-11-20 📅 생성됨 2018-01-03
36
Luce-Org/lucebox

이기종 하드웨어 및 소비자용 GPU를 위한 Lucebox 추론 엔진

Luce-Org
⭐ 3,024 C++ 👤 Luce-Org Organization 🕐 업데이트됨 2026-11-21 📅 생성됨 2026-04-03
37
RayXBuilds/Movie_Recommend

과거 학습 프로젝트: Spark 영화 추천, 웹 스크래핑, 웹 앱 및 백엔드. 새 버전은 cinematch-recommender에서 계속 개발 중입니다.

RayXBuilds
⭐ 3,007 Java 👤 RayXBuilds User 🕐 업데이트됨 2026-10-21 📅 생성됨 2018-04-18
38
spark-jobserver/spark-jobserver

Apache Spark용 REST 작업 서버

spark-jobserver
⭐ 2,833 Scala 👤 spark-jobserver Organization 🕐 업데이트됨 2026-03-03 📅 생성됨 2014-08-21
39
vector4wang/spring-boot-quick

:herb: Spring Boot 기반의 빠른 학습 예제, 직접 경험한 오픈소스 프레임워크 통합, 예: RabbitMQ(지연 큐), Kafka, JPA, Redis, OAuth2, Swagger, JSP, Docker, K3s, K3d, K8s, MyBatis 암호화/복호화 플러그인, 예외 처리, 로그 출력, 멀티 모듈 개발, 멀티 환경 패키징, 캐시 cache, 크롤러, JWT, GraphQL, Dubbo, Zookeeper 및 Async 등 :pushpin:

vector4wang
⭐ 2,789 Java 👤 vector4wang User 🕐 업데이트됨 2026-05-16 📅 생성됨 2017-03-13
40
moj-analytical-services/splink

빠르고 정확하며 확장 가능한 확률적 데이터 링크, 여러 SQL 백엔드 지원

moj-analytical-services
⭐ 2,592 Python 👤 moj-analytical-services Organization 🕐 업데이트됨 2026-11-11 📅 생성됨 2019-11-22
41
geekyouth/SZT-bigdata

선전 지하철 빅데이터 승객 흐름 분석 시스템🚇🚄🌟

geekyouth
⭐ 2,469 Scala 👤 geekyouth User 🕐 업데이트됨 2026-05-12 📅 생성됨 2020-04-13
42
XZB-1248/Spark

✨Spark는 Go로 작성된 웹 기반, 크로스 플랫폼 및 풀 기능의 원격 관리 도구(RAT)로, 어디서든 모든 장치를 제어할 수 있습니다. Spark는 Go로 작성된 웹 기반, 크로스 플랫폼 및 다양한 기능을 갖춘 원격 제어 및 모니터링 도구로, 언제 어디서든 모든 장치를 모니터링하고 제어할 수 있습니다.

XZB-1248
⭐ 2,412 Go 👤 XZB-1248 User 🕐 업데이트됨 2026-03-16 📅 생성됨 2022-03-16
43
apache/kyuubi

Apache Kyuubi는 데이터 웨어하우스와 레이크하우스에서 서버리스 SQL을 제공하기 위한 분산형 멀티 테넌트 게이트웨이입니다.

apache
⭐ 2,379 Scala 👤 apache Organization 🕐 업데이트됨 2026-11-19 📅 생성됨 2017-12-18
44
ytsaurus/ytsaurus

YTsaurus는 확장 가능하고 내결함성이 뛰어난 오픈 소스 빅데이터 플랫폼입니다.

ytsaurus
⭐ 2,325 C++ 👤 ytsaurus Organization 🕐 업데이트됨 2026-11-21 📅 생성됨 2022-12-05
45
o-gs/dji-firmware-tools

DJI 제품 펌웨어 처리 도구 (쿼드콥터 중점).

o-gs
⭐ 2,309 C 👤 o-gs Organization 🕐 업데이트됨 2026-11-11 📅 생성됨 2016-08-03
46
salesforce/TransmogrifAI

TransmogrifAI(발음: trăns-mŏgˈrə-fī)는 최소한의 수동 조정으로 Apache Spark에서 모듈식, 재사용 가능, 강력한 유형의 머신 러닝 워크플로우를 구축하기 위한 AutoML 라이브러리입니다.

salesforce
⭐ 2,280 Scala 👤 salesforce Organization 🕐 업데이트됨 2026-06-02 📅 생성됨 2017-11-02
47
fugue-project/fugue

분산 컴퓨팅을 위한 통합 인터페이스. Fugue는 Spark, Dask 및 Ray에서 SQL, Python, Pandas 및 Polars 코드를 재작성 없이 실행합니다.

fugue-project
⭐ 2,168 Python 👤 fugue-project Organization 🕐 업데이트됨 2026-11-12 📅 생성됨 2020-03-24
48
zio/zio-quill

Scala를 위한 컴파일 시간 언어 통합 쿼리

zio
⭐ 2,165 Scala 👤 zio Organization 🕐 업데이트됨 2026-11-21 📅 생성됨 2015-07-20
49
dotnet/spark

.NET for Apache® Spark™는 .NET 개발자가 Apache Spark™를 쉽게 사용할 수 있도록 합니다.

dotnet
⭐ 2,096 C# 👤 dotnet Organization 🕐 업데이트됨 2026-11-05 📅 생성됨 2019-04-22
50
broadinstitute/gatk

GATK 4 이상 버전 공식 코드 저장소

broadinstitute
⭐ 2,010 Java 👤 broadinstitute Organization 🕐 업데이트됨 2026-11-21 📅 생성됨 2014-12-02

자주 묻는 질문

1

GitHub에서 가장 인기 있는 #spark 저장소는 무엇인가요?

GitHub에서 가장 높은 순위의 오픈 소스 #spark 프로젝트는 46,997개의 스타를 받은 DataTalksClub/data-engineering-zoomcamp입니다. Data Engineering Zoomcamp는 프로덕션 레디 데이터 파이프라인 구축에 관한 9주 무료 코스입니다. 여기서 코스에 참여하세요 👇🏼

2

#spark 저장소에서 가장 많이 사용되는 프로그래밍 언어는 무엇인가요?

GitHub에서 순위가 가장 높은 #spark 프로젝트 중 가장 일반적으로 사용되는 프로그래밍 언어는 Java, Scala, Python, Jupyter Notebook입니다.

3

#spark 저장소 순위는 어떻게 계산되나요?

#spark 태그가 지정된 활성 오픈 소스 저장소(126개, 스타 500개 이상)를 추적하고 있습니다. 총 스타 수는 513,269개이며 저장소당 평균 4,073개입니다. 순위는 GitHub API를 통해 매일 업데이트됩니다.