Git Stars Git Stars

#data-processing 저장소

#data-processing 태그가 지정된 GitHub의 활성 오픈 소스 저장소 72개를 확인해 보세요. 총 211,976개의 스타를 획득했으며 프로젝트당 평균 2,944개입니다. 이 주제를 이끄는 저장소는 61,976개의 스타를 받은 pathwaycom/pathway입니다.

72
총 리포지토리
211,976
총 별점
2,944
리포지토리당 평균 스타 수

저장소 총 72개

1
pathwaycom/pathway

스트림 처리, 실시간 분석, LLM 파이프라인 및 RAG를 위한 Python ETL 프레임워크.

pathwaycom
⭐ 61,976 Python 👤 pathwaycom Organization 🕐 업데이트됨 2026-11-21 📅 생성됨 2022-11-27
2
cocoindex-io/cocoindex

장기 호라이즌 에이전트를 위한 증분 엔진 🌟 마음에 들면 별을 눌러주세요!

cocoindex-io
⭐ 11,923 Rust 👤 cocoindex-io Organization 🕐 업데이트됨 2026-11-21 📅 생성됨 2025-03-03
3
onceupon/Bash-Oneliner

데이터 처리와 Linux 시스템 유지보수를 위한 유용한 Bash One-Liners와 터미널 트릭 모음.

onceupon
⭐ 10,805 👤 onceupon User 🕐 업데이트됨 2026-09-22 📅 생성됨 2016-06-14
4
johnkerl/miller

Miller는 CSV, TSV, 표 형식 JSON과 같은 이름 인덱싱 데이터를 위한 awk, sed, cut, join, sort와 유사합니다.

johnkerl
⭐ 10,069 Go 👤 johnkerl User 🕐 업데이트됨 2026-11-20 📅 생성됨 2015-05-03
5
OpenDCAI/DataFlow

[SIGMOD'27] 최신 LLM 기반 연산자와 파이프라인을 활용한 손쉬운 데이터 준비.

OpenDCAI
⭐ 8,650 Python 👤 OpenDCAI Organization 🕐 업데이트됨 2026-11-18 📅 생성됨 2024-10-13
6
TomWright/dasel

JSON, TOML, YAML, XML, INI, HCL, KDL 및 CSV의 통합 쿼리, 변환 및 수정.

TomWright
⭐ 8,093 Go 👤 TomWright User 🕐 업데이트됨 2026-11-02 📅 생성됨 2020-09-22
7
datajuicer/data-juicer

기초 모델을 위한, 그리고 기초 모델과 함께하는 데이터 처리! 🍎 🍋 🌽 ➡️ ➡️🍸 🍹 🍷

datajuicer
⭐ 7,266 Python 👤 datajuicer Organization 🕐 업데이트됨 2026-11-20 📅 생성됨 2023-08-01
8
google/snappy

빠른 압축/해제 프로그램

google
⭐ 6,633 C++ 👤 google Organization 🕐 업데이트됨 2026-10-23 📅 생성됨 2014-03-03
9
NVIDIA/DALI

GPU 가속 라이브러리로, 데이터 처리용 고도로 최적화된 빌딩 블록과 실행 엔진을 포함하여 딥러닝 훈련 및 추론 애플리케이션을 가속화합니다.

NVIDIA
⭐ 5,797 C++ 👤 NVIDIA Organization 🕐 업데이트됨 2026-11-20 📅 생성됨 2018-06-01
10
deepseek-ai/smallpond

DuckDB 및 3FS 기반의 경량 데이터 처리 프레임워크입니다.

deepseek-ai
⭐ 4,960 Python 👤 deepseek-ai Organization 🕐 업데이트됨 2025-03-05 📅 생성됨 2025-02-24
11
unionai-oss/pandera

경량, 유연하고 표현력 있는 통계 데이터 테스트 라이브러리

unionai-oss
⭐ 4,532 Python 👤 unionai-oss Organization 🕐 업데이트됨 2026-11-19 📅 생성됨 2018-11-01
12
knownsec/aipyapp

AI 기반 Python 및 Python 기반 AI (Python 사용)

knownsec
⭐ 4,026 HTML 👤 knownsec Organization 🕐 업데이트됨 2026-02-15 📅 생성됨 2025-04-06
13
Rdatatable/data.table

R의 data.table 패키지는 data.frame을 확장합니다:

Rdatatable
⭐ 3,930 R 👤 Rdatatable Organization 🕐 업데이트됨 2026-11-20 📅 생성됨 2014-06-07
14
TimelyDataflow/differential-dataflow

Rust의 timely dataflow를 사용한 differential dataflow 구현.

TimelyDataflow
⭐ 3,040 Rust 👤 TimelyDataflow Organization 🕐 업데이트됨 2026-11-21 📅 생성됨 2015-05-05
15
numaproj/numaflow

대규모 병렬 데이터/스트리밍 작업을 실행하는 Kubernetes 네이티브 플랫폼

numaproj
⭐ 2,837 Rust 👤 numaproj Organization 🕐 업데이트됨 2026-11-19 📅 생성됨 2022-05-20
16
datachain-ai/datachain

비정형 데이터를 위한 컨텍스트 레이어: S3, GCS, Azure 기반의 타입 지정 및 버전 관리 데이터셋

datachain-ai
⭐ 2,831 Python 👤 datachain-ai Organization 🕐 업데이트됨 2026-11-21 📅 생성됨 2024-06-25
17
elixir-broadway/broadway

Elixir를 사용한 동시적이고 다단계 데이터 수집 및 데이터 처리

elixir-broadway
⭐ 2,694 Elixir 👤 elixir-broadway Organization 🕐 업데이트됨 2026-11-06 📅 생성됨 2018-11-05
18
google/googlesql

GoogleSQL (이전 이름: ZetaSQL) - SQL 분석 프레임워크

google
⭐ 2,644 C++ 👤 google Organization 🕐 업데이트됨 2026-11-18 📅 생성됨 2019-04-16
19
asyml/texar

TensorFlow 기반의 머신러닝, 자연어 처리 및 텍스트 생성을 위한 툴킷입니다. 이 프로젝트는 CASL 프로젝트의 일부입니다: http://casl-project.ai/

asyml
⭐ 2,391 Python 👤 asyml Organization 🕐 업데이트됨 2026-07-21 📅 생성됨 2017-07-22
20
bytewax/bytewax

Python 스트림 처리

bytewax
⭐ 2,074 Python 👤 bytewax Organization 🕐 업데이트됨 2026-11-13 📅 생성됨 2022-02-04
21
NVIDIA-NeMo/Curator

LLM용 확장 가능한 데이터 전처리 및 큐레이션 툴킷

NVIDIA-NeMo
⭐ 1,866 Python 👤 NVIDIA-NeMo Organization 🕐 업데이트됨 2026-11-19 📅 생성됨 2024-03-14
22
felt/tippecanoe

대규모 GeoJSON 피처 컬렉션에서 벡터 타일셋을 빌드합니다.

felt
⭐ 1,638 C++ 👤 felt Organization 🕐 업데이트됨 2026-11-16 📅 생성됨 2022-08-15
23
allenai/dolma

OLMo 사전 학습 데이터를 생성하고 검사하기 위한 데이터 및 도구입니다.

allenai
⭐ 1,564 Python 👤 allenai Organization 🕐 업데이트됨 2026-08-24 📅 생성됨 2023-06-20
24
pyper-dev/pyper

간편한 동시성 파이썬

pyper-dev
⭐ 1,521 Python 👤 pyper-dev User 🕐 업데이트됨 2025-02-04 📅 생성됨 2024-05-22
25
GoogleCloudPlatform/data-science-on-gcp

소스 코드: Google Cloud Platform의 데이터 과학, Valliappa Lakshmanan, O'Reilly 2017

GoogleCloudPlatform
⭐ 1,432 Jupyter Notebook 👤 GoogleCloudPlatform Organization 🕐 업데이트됨 2026-02-20 📅 생성됨 2017-02-10
26
zapret-info/z-i

러시아 연방에서 필터링된 인터넷 주소 등록부

zapret-info
⭐ 1,388 👤 zapret-info User 🕐 업데이트됨 2025-10-01 📅 생성됨 2012-11-19
27
ncbi/sra-tools

SRA 도구

ncbi
⭐ 1,376 C 👤 ncbi Organization 🕐 업데이트됨 2026-11-19 📅 생성됨 2014-08-21
28
run-house/kubetorch

ML 인프라를 위한 PyTorch처럼, Python에서 AI 워크로드를 Kubernetes에 마법처럼 분산하고 실행하세요.

run-house
⭐ 1,228 Python 👤 run-house Organization 🕐 업데이트됨 2026-05-29 📅 생성됨 2022-05-10
29
RadarCODE/awesome-sar

훌륭한 합성 개구 레이더(SAR) 소프트웨어, 라이브러리 및 리소스 모음입니다.

RadarCODE
⭐ 1,193 👤 RadarCODE Organization 🕐 업데이트됨 2025-07-22 📅 생성됨 2016-06-03
30
GeospatialPython/pyshp

이 라이브러리는 순수 Python으로 ESRI Shapefile을 읽고 씁니다.

GeospatialPython
⭐ 1,160 Python 👤 GeospatialPython User 🕐 업데이트됨 2026-11-16 📅 생성됨 2014-03-04
31
nikic/iter

제너레이터를 사용한 반복 기본 요소

nikic
⭐ 1,145 PHP 👤 nikic User 🕐 업데이트됨 2026-09-23 📅 생성됨 2013-07-01
32
felixonmars/fcitx5-pinyin-zhwiki

Fcitx 5 병음 사전 (zh.wikipedia.org)

felixonmars
⭐ 1,108 Python 👤 felixonmars User 🕐 업데이트됨 2026-10-17 📅 생성됨 2020-05-23
33
tadija/AEXML

간단하고 가벼운 XML 파싱을 위한 Swift 미니언

tadija
⭐ 1,037 Swift 👤 tadija User 🕐 업데이트됨 2026-11-19 📅 생성됨 2014-10-16
34
google-deepmind/tree

tree는 중첩된 데이터 구조를 다루기 위한 라이브러리입니다

google-deepmind
⭐ 1,027 Python 👤 google-deepmind Organization 🕐 업데이트됨 2026-11-15 📅 생성됨 2019-10-08
35
thepycoach/automation

Python을 이용한 자동화 (Excel, 스크립트 등)

thepycoach
⭐ 1,010 Jupyter Notebook 👤 thepycoach User 🕐 업데이트됨 2024-05-19 📅 생성됨 2021-05-02
36
negokaz/excel-mcp-server

MS Excel 데이터를 읽고 쓰는 Model Context Protocol(MCP) 서버

negokaz
⭐ 991 Go 👤 negokaz User 🕐 업데이트됨 2025-07-19 📅 생성됨 2025-02-16
37
fireducks-dev/fireducks

FireDucks에 이슈 생성

fireducks-dev
⭐ 929 Jupyter Notebook 👤 fireducks-dev Organization 🕐 업데이트됨 2025-05-22 📅 생성됨 2023-10-12
38
samtools/bcftools

이것은 BCFtools의 공식 개발 저장소입니다. 설치 지침 및 기타 문서는 여기에서 확인하세요 http://samtools.github.io/bcftools/howtos/install.html

samtools
⭐ 905 C 👤 samtools Organization 🕐 업데이트됨 2026-11-20 📅 생성됨 2013-07-12
39
bastibe/python-soundfile

SoundFile는 libsndfile, CFFI 및 NumPy를 기반으로 하는 오디오 라이브러리입니다

bastibe
⭐ 872 Python 👤 bastibe User 🕐 업데이트됨 2026-10-24 📅 생성됨 2013-08-27
40
TeamMsgExtractor/msg-extractor

Microsoft Outlook의 .msg 파일에 저장된 이메일 및 첨부 파일을 추출합니다.

TeamMsgExtractor
⭐ 858 Python 👤 TeamMsgExtractor Organization 🕐 업데이트됨 2026-11-05 📅 생성됨 2013-07-24
41
MohElshamy1994/n8n-course-Projetcs

n8n 프로젝트는 내 유튜브 코스용입니다.

MohElshamy1994
⭐ 854 👤 MohElshamy1994 User 🕐 업데이트됨 2025-10-19 📅 생성됨 2025-07-13
42
0xfdf/toraniko

정량 거래를 위한 다중 요인 주식 위험 모델.

0xfdf
⭐ 853 Python 👤 0xfdf User 🕐 업데이트됨 2024-08-16 📅 생성됨 2024-07-03
43
benibela/xidel

HTML/XML 페이지 또는 JSON-API에서 데이터를 다운로드하고 추출하는 명령줄 도구로, CSS, XPath 3.0, XQuery 3.0, JSONiq 또는 패턴 매칭을 사용합니다. 새로운 또는 변환된 XML/HTML/JSON 문서를 생성할 수도 있습니다.

benibela
⭐ 836 Pascal 👤 benibela User 🕐 업데이트됨 2025-02-22 📅 생성됨 2015-06-11
44
bugen/pypipe

Python 파이프 명령줄 도구

bugen
⭐ 802 Python 👤 bugen User 🕐 업데이트됨 2024-01-04 📅 생성됨 2023-09-20
45
influxdata/flux

Flux는 데이터베이스(예: InfluxDB)를 쿼리하고 데이터를 작업하는 경량 스크립팅 언어입니다. InfluxDB 1.7과 2.0의 일부이지만, 그들 없이 독립적으로 실행할 수 있습니다.

influxdata
⭐ 794 FLUX 👤 influxdata Organization 🕐 업데이트됨 2026-11-17 📅 생성됨 2018-06-14
46
PreSenseRadar/OpenRadar

레이더 데이터와 상호작용하고 처리하기 위한 오픈 소스 라이브러리, MIMO mmWave 레이더에 특화됨

PreSenseRadar
⭐ 776 Jupyter Notebook 👤 PreSenseRadar User 🕐 업데이트됨 2024-04-30 📅 생성됨 2019-09-20
47
ChenghaoMou/text-dedup

올인원 텍스트 중복 제거

ChenghaoMou
⭐ 765 Python 👤 ChenghaoMou User 🕐 업데이트됨 2026-03-09 📅 생성됨 2021-03-13
48
JuliaParallel/Dagger.jl

메모리 외부 및 병렬 실행을 위한 프레임워크

JuliaParallel
⭐ 734 Julia 👤 JuliaParallel Organization 🕐 업데이트됨 2026-11-02 📅 생성됨 2015-12-03
49
hstreamdb/hstream

HStreamDB는 IoT 및 그 이상을 위한 오픈 소스, 클라우드 네이티브 스트리밍 데이터베이스입니다. 실시간 애플리케이션을 위해 데이터 스택을 현대화하십시오.

hstreamdb
⭐ 728 Haskell 👤 hstreamdb Organization 🕐 업데이트됨 2024-12-26 📅 생성됨 2020-08-31
50
omarabid/rust-companies

생산 환경에서 Rust를 사용하는 회사 목록.

omarabid
⭐ 721 👤 omarabid User 🕐 업데이트됨 2026-09-11 📅 생성됨 2020-02-05

자주 묻는 질문

1

GitHub에서 가장 인기 있는 #data-processing 저장소는 무엇인가요?

GitHub에서 가장 높은 순위의 오픈 소스 #data-processing 프로젝트는 61,976개의 스타를 받은 pathwaycom/pathway입니다. 스트림 처리, 실시간 분석, LLM 파이프라인 및 RAG를 위한 Python ETL 프레임워크.

2

#data-processing 저장소에서 가장 많이 사용되는 프로그래밍 언어는 무엇인가요?

GitHub에서 순위가 가장 높은 #data-processing 프로젝트 중 가장 일반적으로 사용되는 프로그래밍 언어는 Python, C++, Jupyter Notebook, Rust입니다.

3

#data-processing 저장소 순위는 어떻게 계산되나요?

#data-processing 태그가 지정된 활성 오픈 소스 저장소(72개, 스타 500개 이상)를 추적하고 있습니다. 총 스타 수는 211,976개이며 저장소당 평균 2,944개입니다. 순위는 GitHub API를 통해 매일 업데이트됩니다.