#data-pipelines 저장소
#data-pipelines 태그가 지정된 GitHub의 활성 오픈 소스 저장소 50개를 확인해 보세요. 총 323,108개의 스타를 획득했으며 프로젝트당 평균 6,462개입니다. 이 주제를 이끄는 저장소는 73,884개의 스타를 받은 twitter/the-algorithm입니다.
저장소 총 50개
문서를 구조화된 데이터로 손쉽게 변환하세요. Unstructured는 복잡한 문서를 언어 모델을 위한 깨끗하고 구조화된 형식으로 변환하는 오픈 소스 ETL 솔루션입니다. 프로덕션 등급 워크플로, 파티셔닝, 보강, 청킹 및 임베딩을 위한 엔터프라이즈급 플랫폼 제품에 대해 자세히 알아보려면 당사 웹사이트를 방문하십시오.
Apache DolphinScheduler는 현대적인 데이터 오케스트레이션 플랫폼입니다. 저코드로 고성능 워크플로우를 생성하는 데 민첩합니다.
Kedro는 생산 준비가 된 데이터 사이언스를 위한 도구 상자입니다. 소프트웨어 엔지니어링 모범 사례를 사용하여 재현 가능하고, 유지 관리 가능하며, 모듈러인 데이터 엔지니어링 및 데이터 사이언스 파이프라인을 생성하는 데 도움을 줍니다.
Preswald는 Python 기반 인터랙티브 데이터 앱을 위한 WASM 패키저입니다. Pyodide, DuckDB, Pandas 및 Plotly, Matplotlib 등을 사용하여 복잡한 데이터 워크플로우 전체, 특히 시각화를 단일 파일로 번들링하여 브라우저에서 완전히 실행할 수 있습니다. 오프라인에서 실행되고, 빠르게 로드되며, 문서처럼 공유할 수 있는 대시보드, 보고서 및 노트북을 구축하세요.
Meltano: 여러분의 가장 대담한 데이터 및 ML 기반 제품 아이디어를 현실로 만드는 선언적 코드 중심 데이터 통합 엔진. 자체 API 통합을 작성, 유지 관리 및 확장하는 데 작별을 고하세요.
데이터 및 분석 엔지니어를 위한 dbt 네이티브 데이터 관찰 솔루션. 몇 분 안에 데이터 파이프라인을 모니터링하세요. 프리미엄 기능을 갖춘 자체 호스팅 또는 클라우드 서비스로 제공됩니다.
데이터 엔지니어링을 배우기 가장 좋은 곳입니다. 데이터 엔지니어링 커뮤니티에서 만들고 유지 관리합니다.
SQL 및 Python을 사용하여 데이터 파이프라인을 구축하고, 다양한 소스에서 데이터를 수집하며, 품질 검사를 추가하고, 엔드투엔드 흐름을 구축합니다.
최초의 오픈 소스 데이터 검색 및 관찰 가능성 플랫폼입니다. 데이터 실무자들의 업무를 쉽게 하여 귀하가 비즈니스에 집중할 수 있도록 합니다.
변경 데이터 캡처를 활용하는 데이터베이스 복제 플랫폼. 실시간으로 데이터베이스의 프로덕션 데이터를 데이터 웨어하우스(Snowflake, BigQuery, Redshift, Databricks)로 스트리밍하십시오.
Tuplex는 Python으로 작성된 데이터 과학 파이프라인을 컴파일된 코드 속도로 실행하는 병렬 빅데이터 처리 프레임워크입니다. Tuplex는 Apache Spark 또는 Dask와 유사한 Python API를 제공하지만, Python 인터프리터를 호출하는 대신 주어진 파이프라인 및 입력 데이터 세트에 대해 최적화된 LLVM 바이트코드를 생성합니다.
Optimus는 데이터 변환, 데이터 모델링, 파이프라인 및 데이터 품질 관리를 위한 사용하기 쉽고 안정적이며 성능이 뛰어난 워크플로우 오케스트레이터입니다.
이 dbt 패키지는 메타데이터, 아티팩트 및 테스트 결과를 캡처하여 이상 징후를 감지하고, 데이터 품질을 모니터링하며, 메타데이터 테이블을 구축할 수 있게 합니다. Elementary OSS를 구동하며 Elementary Cloud의 전체 Data & AI Control Plane에서 사용되는 더 넓은 컨텍스트 레이어를 제공합니다.
자주 묻는 질문
GitHub에서 가장 인기 있는 #data-pipelines 저장소는 무엇인가요?
GitHub에서 가장 높은 순위의 오픈 소스 #data-pipelines 프로젝트는 73,884개의 스타를 받은 twitter/the-algorithm입니다. X 추천 알고리즘 소스 코드
#data-pipelines 저장소에서 가장 많이 사용되는 프로그래밍 언어는 무엇인가요?
GitHub에서 순위가 가장 높은 #data-pipelines 프로젝트 중 가장 일반적으로 사용되는 프로그래밍 언어는 Python, Go, Java, Rust입니다.
#data-pipelines 저장소 순위는 어떻게 계산되나요?
#data-pipelines 태그가 지정된 활성 오픈 소스 저장소(50개, 스타 500개 이상)를 추적하고 있습니다. 총 스타 수는 323,108개이며 저장소당 평균 6,462개입니다. 순위는 GitHub API를 통해 매일 업데이트됩니다.