#data-engineering 저장소
저장소 총 152개
Apache Hamilton은 데이터 과학자와 엔지니어가 계보/추적 및 메타데이터를 인코딩하는 테스트 가능한 모듈식 자체 문서화 데이터 흐름을 정의하도록 돕습니다. 파이썬이 실행되는 모든 곳에서 실행되고 확장됩니다.
데이터 엔지니어링을 배우기 가장 좋은 곳입니다. 데이터 엔지니어링 커뮤니티에서 만들고 유지 관리합니다.
👾 nao는 오픈 소스 에이전틱 BI 1위입니다. (1) nao-core CLI로 컨텍스트를 만들고, (2) 모두가 사용할 수 있도록 nao 채팅 인터페이스를 배포하세요.
데이터 엔지니어링의 미래 — 현대적인 데이터 스택을 위한 CLI SQL 클라이언트로, 데이터에 대한 AI 네이티브 컨텍스트 엔지니어링을 가능하게 합니다.
데이터 과학, 데이터 엔지니어링, 머신 러닝, 딥 러닝, 컴퓨터 과학, 프로그래밍, 소프트웨어 엔지니어링 등을 다루는 180개 이상의 YouTube 채널 종합 목록입니다.
무료 30시간 SQL 강좌 자료: SQL Server, MySQL, PostgreSQL용 데이터베이스, 41개 챕터의 모든 쿼리, 그리고 슬라이드.
MLRun은 오픈 소스 MLOps 플랫폼으로, ML 애플리케이션의 라이프사이클 전반에 걸쳐 지속적인 ML 애플리케이션을 빠르게 구축하고 관리할 수 있습니다. MLRun은 개발 및 CI/CD 환경에 통합되어 프로덕션 데이터, ML 파이프라인 및 온라인 애플리케이션의 배포를 자동화합니다.
ktx는 데이터 및 분석 에이전트를 위한 실행 가능한 컨텍스트 계층입니다 🐙 Claude Code, Codex 또는 다른 AI 에이전트가 회사의 전체 컨텍스트를 바탕으로 분석 데이터베이스를 정확하게 쿼리할 수 있도록 합니다
https://www.dolthub.com/repositories/chenditc/investment_data용 스크립트 및 문서
자체 서버 또는 클라우드에 배포하는 오픈 소스 ETL/ELT입니다. DuckDB 기반으로 구축되었으며, 노코드/로우코드 시각적 파이프라인 또는 SQL, 446개 컴포넌트, dbt, CDC, 데이터 품질, 리버스 ETL, 데이터 계보, AI 에이전트를 위한 MCP를 제공합니다. 벤더 클라우드가 필요 없고 행 단위 과금도 없습니다.
최고 기술 회사들의 300개 이상의 엔지니어링 블로그 아티클 큐레이션 컬렉션. 최고 엔지니어링 팀이 대규모로 실제 문제를 어떻게 해결하는지 배우세요.
최초의 오픈 소스 데이터 검색 및 관찰 가능성 플랫폼입니다. 데이터 실무자들의 업무를 쉽게 하여 귀하가 비즈니스에 집중할 수 있도록 합니다.
소스 코드: Google Cloud Platform의 데이터 과학, Valliappa Lakshmanan, O'Reilly 2017
Quilt는 AWS상의 과학 데이터 관리 플랫폼으로, 팀과 AI가 깊이 버전 관리되고 맥락이 풍부한 데이터 패키지를 통해 데이터를 찾고, 신뢰하며, 재사용할 수 있도록 도와줍니다.
Snowflake, Databricks, BigQuery, Kafka 및 15개 이상의 플랫폼을 위한 오픈소스 데이터 계약 테스트. Open Data Contract Standard(ODCS)를 기반으로 구축되었습니다. MIT 라이선스.
두 개의 소스 시스템(CRM 및 ERP)에서 브론즈, 실버, 골드 계층을 거쳐 SQL Server에 데이터 웨어하우스를 구축하세요. 무료 전체 프로젝트의 파일 및 스크립트.
🧞 JSON 개체를 MySQL, JSON 스키마, Mongoose, Google BigQuery, Swagger 등으로 변환합니다.