Git Stars Git Stars

#pyspark 저장소

#pyspark 태그가 지정된 GitHub의 활성 오픈 소스 저장소 35개를 확인해 보세요. 총 60,070개의 스타를 획득했으며 프로젝트당 평균 1,716개입니다. 이 주제를 이끄는 저장소는 6,705개의 스타를 받은 ibis-project/ibis입니다.

35
총 리포지토리
60,070
총 별점
1,716
리포지토리당 평균 스타 수

저장소 총 35개

1
ibis-project/ibis

휴대 가능한 Python 데이터프레임 라이브러리

ibis-project
⭐ 6,705 Python 👤 ibis-project Organization 🕐 업데이트됨 2026-11-20 📅 생성됨 2015-04-17
2
microsoft/SynapseML

Spark용 ML 알고리즘을 포팅하는 간단하고 분산된 머신 러닝 Python 라이브러리

microsoft
⭐ 5,257 Scala 👤 microsoft Organization 🕐 업데이트됨 2026-11-18 📅 생성됨 2017-06-05
3
JohnSnowLabs/spark-nlp

최첨단 자연어 처리

JohnSnowLabs
⭐ 4,162 Scala 👤 JohnSnowLabs Organization 🕐 업데이트됨 2026-11-14 📅 생성됨 2017-09-24
4
databricks/learning-spark

Learning Spark 책의 예제 코드

databricks
⭐ 3,895 Java 👤 databricks Organization 🕐 업데이트됨 2026-06-30 📅 생성됨 2014-06-16
5
lakehq/sail

Rust로 작성된 Apache Spark의 즉시 교체 가능한 대체재로, 배치 처리, 스트림 처리 및 컴퓨트 집약적 AI 워크로드를 통합합니다.

lakehq
⭐ 3,504 Rust 👤 lakehq Organization 🕐 업데이트됨 2026-11-21 📅 생성됨 2023-12-21
6
apache/linkis

Apache Linkis는 상위 애플리케이션과 하위 데이터 엔진 간의 연결, 거버넌스 및 오케스트레이션을 용이하게 하기 위해 계산 미들웨어 레이어를 구축합니다.

apache
⭐ 3,417 Java 👤 apache Organization 🕐 업데이트됨 2026-11-04 📅 생성됨 2019-07-23
7
danielbeach/data-engineering-practice

데이터 엔지니어링 연습 문제

danielbeach
⭐ 2,706 Python 👤 danielbeach User 🕐 업데이트됨 2025-01-08 📅 생성됨 2022-02-17
8
awesome-spark/awesome-spark

멋진 Apache Spark 패키지 및 리소스 모음 목록입니다.

awesome-spark
⭐ 1,903 Shell 👤 awesome-spark Organization 🕐 업데이트됨 2026-02-27 📅 생성됨 2016-02-01
9
uber/petastorm

Petastorm 라이브러리는 Apache Parquet 형식의 데이터 세트에서 딥러닝 모델의 단일 머신 또는 분산 학습 및 평가를 가능하게 합니다. Tensorflow, Pytorch, PySpark와 같은 ML 프레임워크를 지원하며 순수 Python 코드로 사용할 수 있습니다.

uber
⭐ 1,894 Python 👤 uber Organization 🕐 업데이트됨 2026-01-02 📅 생성됨 2018-06-15
10
narwhals-dev/narwhals

데이터프레임 라이브러리 간의 가볍고 확장 가능한 호환성 계층!

narwhals-dev
⭐ 1,754 Python 👤 narwhals-dev Organization 🕐 업데이트됨 2026-11-21 📅 생성됨 2024-02-19
11
jadianes/spark-py-notebooks

Apache Spark & Python (pySpark)을 사용한 빅 데이터 분석 및 머신 러닝 튜토리얼, IPython / Jupyter 노트북 형식으로

jadianes
⭐ 1,667 Jupyter Notebook 👤 jadianes User 🕐 업데이트됨 2024-03-16 📅 생성됨 2015-05-06
12
hi-primus/optimus

:truck: Pandas, Dask, cuDF, Dask-cuDF, Vaex 및 PySpark로 쉽게 만드는 민첩한 데이터 준비 워크플로우

hi-primus
⭐ 1,539 Python 👤 hi-primus Organization 🕐 업데이트됨 2024-12-02 📅 생성됨 2017-07-13
14
spark-examples/pyspark-examples

Python 언어로 된 PySpark RDD, DataFrame 및 Dataset 예제

spark-examples
⭐ 1,371 Python 👤 spark-examples Organization 🕐 업데이트됨 2025-12-07 📅 생성됨 2019-11-26
15
jupyter-incubator/sparkmagic

원격 Spark 클러스터와 작업하기 위한 Jupyter 마직 및 커널

jupyter-incubator
⭐ 1,368 Python 👤 jupyter-incubator Organization 🕐 업데이트됨 2026-11-20 📅 생성됨 2015-09-21
16
logicalclocks/hopsworks

Hopsworks - 기능 저장소가 포함된 데이터 집약적 AI 플랫폼

logicalclocks
⭐ 1,299 Java 👤 logicalclocks Organization 🕐 업데이트됨 2025-02-10 📅 생성됨 2018-07-26
17
mahmoudparsian/pyspark-tutorial

PySpark-Tutorial은 PySpark를 사용하여 기본 알고리즘을 제공합니다.

mahmoudparsian
⭐ 1,276 Jupyter Notebook 👤 mahmoudparsian User 🕐 업데이트됨 2025-05-26 📅 생성됨 2015-03-12
18
graphframes/graphframes

GraphFrames는 Apache Spark용 패키지로, DataFrame 기반 그래프를 제공합니다.

graphframes
⭐ 1,213 Scala 👤 graphframes Organization 🕐 업데이트됨 2026-11-12 📅 생성됨 2016-01-20
19
JohnSnowLabs/spark-nlp-workshop

John Snow Labs의 Apache Spark용 NLP를 사용하는 공개 실행 가능한 예제.

JohnSnowLabs
⭐ 1,089 Jupyter Notebook 👤 JohnSnowLabs Organization 🕐 업데이트됨 2026-11-17 📅 생성됨 2018-08-20
20
mahmoudparsian/data-algorithms-book

데이터 알고리즘 책: MapReduce, Spark, Java, Scala

mahmoudparsian
⭐ 1,083 Java 👤 mahmoudparsian User 🕐 업데이트됨 2024-10-14 📅 생성됨 2014-08-06
21
h2oai/sparkling-water

Sparkling Water는 Spark 클러스터 내에서 H2O 기능을 제공합니다.

h2oai
⭐ 982 Scala 👤 h2oai Organization 🕐 업데이트됨 2025-11-05 📅 생성됨 2014-10-13
22
criteo/autofaiss

가장 최적의 유사도 검색 매개변수를 사용하여 Faiss knn 인덱스를 자동으로 생성합니다.

criteo
⭐ 906 Python 👤 criteo Organization 🕐 업데이트됨 2025-11-04 📅 생성됨 2021-04-28
23
PatrikHlobil/Pandas-Bokeh

Pandas와 GeoPandas를 위한 Bokeh 플로팅 백엔드

PatrikHlobil
⭐ 889 Python 👤 PatrikHlobil User 🕐 업데이트됨 2024-04-10 📅 생성됨 2018-11-23
24
pyspark-ai/pyspark-ai

Apache Spark용 영어 SDK

pyspark-ai
⭐ 879 Python 👤 pyspark-ai Organization 🕐 업데이트됨 2026-10-27 📅 생성됨 2023-04-27
25
awslabs/python-deequ

Deequ용 Python API

awslabs
⭐ 826 Jupyter Notebook 👤 awslabs Organization 🕐 업데이트됨 2026-10-24 📅 생성됨 2020-11-09
26
HariSekhon/DevOps-Python-tools

80+ DevOps 및 데이터 CLI 도구 - AWS, GCP, GCF Python Cloud Functions, Log Anonymizer, Spark, Hadoop, HBase, Hive, Impala, Linux, Docker, Spark 데이터 변환기 및 검증기 (Avro/Parquet/JSON/CSV/INI/XML/YAML), Travis CI, AWS CloudFormation, Elasticsearch, Solr 등.

HariSekhon
⭐ 824 Python 👤 HariSekhon User 🕐 업데이트됨 2026-02-03 📅 생성됨 2015-10-27
27
Nike-Inc/koheesio

효율적인 데이터 파이프라인 구축을 위한 Python 프레임워크입니다. 모듈성과 협업을 촉진하여 간단하고 재사용 가능한 구성 요소로 복잡한 파이프라인을 만들 수 있습니다.

Nike-Inc
⭐ 818 Python 👤 Nike-Inc Organization 🕐 업데이트됨 2026-10-17 📅 생성됨 2024-05-06
28
WeBankFinTech/Scriptis

Scriptis는 스크립트 개발(SQL, PySpark, HiveQL), 작업 제출(Spark, Hive), UDF, 함수, 자원 관리 및 지능형 진단을 통한 대화형 데이터 분석을 위한 것입니다.

WeBankFinTech
⭐ 812 Vue 👤 WeBankFinTech Organization 🕐 업데이트됨 2024-12-11 📅 생성됨 2019-07-23
29
MrPowers/chispa

PySpark 테스트 헬퍼 메서드와 아름다운 오류 메시지

MrPowers
⭐ 778 Python 👤 MrPowers User 🕐 업데이트됨 2026-11-20 📅 생성됨 2019-03-19
30
databricks/tensorframes

[DEPRECATED] Apache Spark의 DataFrames를 위한 Tensorflow 래퍼

databricks
⭐ 745 Scala 👤 databricks Organization 🕐 업데이트됨 2024-07-30 📅 생성됨 2016-03-04
31
awslabs/aws-glue-libs

AWS Glue 라이브러리는 ETL 작업을 위한 Spark에 대한 추가 기능 및 향상 사항입니다.

awslabs
⭐ 701 Python 👤 awslabs Organization 🕐 업데이트됨 2026-10-30 📅 생성됨 2017-08-11
32
mrpowers-io/quinn

PySpark 메서드로 개발자 생산성 향상 방법 📣 👯 🎉

mrpowers-io
⭐ 691 Python 👤 mrpowers-io Organization 🕐 업데이트됨 2026-10-25 📅 생성됨 2017-09-15
33
capitalone/datacompy

인간을 위한 Pandas, Polars, Spark, Snowpark DataFrame 비교 및 더 많은 것!

capitalone
⭐ 669 Python 👤 capitalone Organization 🕐 업데이트됨 2026-11-16 📅 생성됨 2018-03-23
34
cluster-apps-on-docker/spark-standalone-cluster-on-docker

Docker에서 JupyterLab 인터페이스를 사용하여 자신만의 클러스터를 구축하면서 Scala, Python (PySpark) 및 R (SparkR)로 Apache Spark를 학습하십시오. :zap:

cluster-apps-on-docker
⭐ 510 Jupyter Notebook 👤 cluster-apps-on-docker Organization 🕐 업데이트됨 2025-11-07 📅 생성됨 2020-07-03
35
databrickslabs/dbldatagen

프로젝트에 적합한 합성 데이터를 빠르게 생성하세요. Databricks Labs 합성 데이터 생성기(일명 `dbldatagen`)를 사용하면 Delta Live Tables 파이프라인을 포함한 Databricks 환경에서 테스트, 개념 증명(POC) 및 기타 용도에 사용할 대규모 시뮬레이션/합성 데이터 세트를 생성할 수 있습니다.

databrickslabs
⭐ 506 Python 👤 databrickslabs Organization 🕐 업데이트됨 2026-10-26 📅 생성됨 2019-07-23

자주 묻는 질문

1

GitHub에서 가장 인기 있는 #pyspark 저장소는 무엇인가요?

GitHub에서 가장 높은 순위의 오픈 소스 #pyspark 프로젝트는 6,705개의 스타를 받은 ibis-project/ibis입니다. 휴대 가능한 Python 데이터프레임 라이브러리

2

#pyspark 저장소에서 가장 많이 사용되는 프로그래밍 언어는 무엇인가요?

GitHub에서 순위가 가장 높은 #pyspark 프로젝트 중 가장 일반적으로 사용되는 프로그래밍 언어는 Python, Scala, Jupyter Notebook, Java입니다.

3

#pyspark 저장소 순위는 어떻게 계산되나요?

#pyspark 태그가 지정된 활성 오픈 소스 저장소(35개, 스타 500개 이상)를 추적하고 있습니다. 총 스타 수는 60,070개이며 저장소당 평균 1,716개입니다. 순위는 GitHub API를 통해 매일 업데이트됩니다.