#pyspark 저장소
#pyspark 태그가 지정된 GitHub의 활성 오픈 소스 저장소 35개를 확인해 보세요. 총 60,070개의 스타를 획득했으며 프로젝트당 평균 1,716개입니다. 이 주제를 이끄는 저장소는 6,705개의 스타를 받은 ibis-project/ibis입니다.
저장소 총 35개
Apache Linkis는 상위 애플리케이션과 하위 데이터 엔진 간의 연결, 거버넌스 및 오케스트레이션을 용이하게 하기 위해 계산 미들웨어 레이어를 구축합니다.
Petastorm 라이브러리는 Apache Parquet 형식의 데이터 세트에서 딥러닝 모델의 단일 머신 또는 분산 학습 및 평가를 가능하게 합니다. Tensorflow, Pytorch, PySpark와 같은 ML 프레임워크를 지원하며 순수 Python 코드로 사용할 수 있습니다.
Apache Spark & Python (pySpark)을 사용한 빅 데이터 분석 및 머신 러닝 튜토리얼, IPython / Jupyter 노트북 형식으로
80+ DevOps 및 데이터 CLI 도구 - AWS, GCP, GCF Python Cloud Functions, Log Anonymizer, Spark, Hadoop, HBase, Hive, Impala, Linux, Docker, Spark 데이터 변환기 및 검증기 (Avro/Parquet/JSON/CSV/INI/XML/YAML), Travis CI, AWS CloudFormation, Elasticsearch, Solr 등.
효율적인 데이터 파이프라인 구축을 위한 Python 프레임워크입니다. 모듈성과 협업을 촉진하여 간단하고 재사용 가능한 구성 요소로 복잡한 파이프라인을 만들 수 있습니다.
Scriptis는 스크립트 개발(SQL, PySpark, HiveQL), 작업 제출(Spark, Hive), UDF, 함수, 자원 관리 및 지능형 진단을 통한 대화형 데이터 분석을 위한 것입니다.
Docker에서 JupyterLab 인터페이스를 사용하여 자신만의 클러스터를 구축하면서 Scala, Python (PySpark) 및 R (SparkR)로 Apache Spark를 학습하십시오. :zap:
프로젝트에 적합한 합성 데이터를 빠르게 생성하세요. Databricks Labs 합성 데이터 생성기(일명 `dbldatagen`)를 사용하면 Delta Live Tables 파이프라인을 포함한 Databricks 환경에서 테스트, 개념 증명(POC) 및 기타 용도에 사용할 대규모 시뮬레이션/합성 데이터 세트를 생성할 수 있습니다.
자주 묻는 질문
GitHub에서 가장 인기 있는 #pyspark 저장소는 무엇인가요?
GitHub에서 가장 높은 순위의 오픈 소스 #pyspark 프로젝트는 6,705개의 스타를 받은 ibis-project/ibis입니다. 휴대 가능한 Python 데이터프레임 라이브러리
#pyspark 저장소에서 가장 많이 사용되는 프로그래밍 언어는 무엇인가요?
GitHub에서 순위가 가장 높은 #pyspark 프로젝트 중 가장 일반적으로 사용되는 프로그래밍 언어는 Python, Scala, Jupyter Notebook, Java입니다.
#pyspark 저장소 순위는 어떻게 계산되나요?
#pyspark 태그가 지정된 활성 오픈 소스 저장소(35개, 스타 500개 이상)를 추적하고 있습니다. 총 스타 수는 60,070개이며 저장소당 평균 1,716개입니다. 순위는 GitHub API를 통해 매일 업데이트됩니다.