#data-engineering 저장소
#data-engineering 태그가 지정된 GitHub의 활성 오픈 소스 저장소 152개를 확인해 보세요. 총 727,632개의 스타를 획득했으며 프로젝트당 평균 4,787개입니다. 이 주제를 이끄는 저장소는 75,603개의 스타를 받은 apache/superset입니다.
저장소 총 152개
Data Engineering Zoomcamp는 프로덕션 레디 데이터 파이프라인 구축에 관한 9주 무료 코스입니다. 여기서 코스에 참여하세요 👇🏼
어디서나 모든 것을 오케스트레이션하세요. 데이터, 인프라, 비즈니스 프로세스 및 AI 에이전트 전반의 워크플로를 위한 오픈 소스 컨트롤 플레인입니다. 선언형 YAML, 이벤트 기반, 모든 언어 지원, Git 버전 관리, 수백만 건의 실행으로 확장 가능합니다.
오픈소스 데이터 이동: ELT 파이프라인 및 AI 에이전트용 — API, 데이터베이스, 파일에서 데이터 웨어하우스, 데이터 레이크, AI 애플리케이션으로. 셀프 호스팅 및 클라우드.
클라우드 구성 및 보안 데이터를 위한 데이터 파이프라인. 클라우드 자산 인벤토리, CSPM, FinOps 및 취약점 관리 솔루션을 구축합니다. AWS, Azure, GCP 및 70개 이상의 클라우드 및 SaaS 소스에서 데이터를 추출합니다.
DataX 통합 시각화 페이지에서 데이터 소스를 선택하면 원클릭으로 데이터 동기화 작업을 생성할 수 있으며, RDBMS, Hive, HBase, ClickHouse, MongoDB 등의 데이터 소스를 지원합니다. RDBMS 데이터 동기화 작업을 대량으로 생성하고, 오픈 소스 스케줄링 시스템을 통합하여 분산 처리, 증분 동기화 데이터, 실시간 실행 로그 보기, 실행기 자원 모니터링, 실행 프로세스 KILL, 데이터 소스 정보 암호화 등을 지원합니다.
DeepAnalyze는 자율 데이터 과학을 위한 최초의 에이전트형 LLM입니다. 🎈 방대한 데이터를 자동으로 분석하고 클릭 한 번으로 전문 분석 보고서를 생성하는 귀하의 AI 데이터 분석가!
SQL Translator는 인공지능을 사용하여 자연어 쿼리를 SQL 코드로 변환하는 도구입니다. 이 프로젝트는 100% 무료이며 오픈 소스입니다.
AWS에서의 pandas - Athena, Glue, Redshift, Timestream, Neptune, OpenSearch, QuickSight, Chime, CloudWatchLogs, DynamoDB, EMR, SecretManager, PostgreSQL, MySQL, SQLServer 및 S3 (Parquet, CSV, JSON 및 EXCEL)와의 쉬운 통합.
Apache DevLake는 DevOps 도구에서 파편화된 데이터를 수집, 분석 및 시각화하여 엔지니어링 우수성, 개발자 경험 및 커뮤니티 성장에 대한 통찰력을 추출하는 오픈 소스 개발자 데이터 플랫폼입니다.
LLM, 에이전트, RAG, 미세 조정, LLMOps 및 AI 시스템 기술을 사용하여 Second Brain AI 어시스턴트를 구축하는 방법을 알아보세요.
Meltano: 여러분의 가장 대담한 데이터 및 ML 기반 제품 아이디어를 현실로 만드는 선언적 코드 중심 데이터 통합 엔진. 자체 API 통합을 작성, 유지 관리 및 확장하는 데 작별을 고하세요.
자주 묻는 질문
GitHub에서 가장 인기 있는 #data-engineering 저장소는 무엇인가요?
GitHub에서 가장 높은 순위의 오픈 소스 #data-engineering 프로젝트는 75,603개의 스타를 받은 apache/superset입니다. Apache Superset는 데이터 시각화 및 데이터 탐색 플랫폼입니다
#data-engineering 저장소에서 가장 많이 사용되는 프로그래밍 언어는 무엇인가요?
GitHub에서 순위가 가장 높은 #data-engineering 프로젝트 중 가장 일반적으로 사용되는 프로그래밍 언어는 Python, Go, Rust, Jupyter Notebook입니다.
#data-engineering 저장소 순위는 어떻게 계산되나요?
#data-engineering 태그가 지정된 활성 오픈 소스 저장소(152개, 스타 500개 이상)를 추적하고 있습니다. 총 스타 수는 727,632개이며 저장소당 평균 4,787개입니다. 순위는 GitHub API를 통해 매일 업데이트됩니다.