Git Stars Git Stars

#data-engineering Repositories

152
Gesamtzahl der Repositories
727,632
Gesamtanzahl der Sterne
4,787
Durchschnittliche Sterne/Repo

Insgesamt 152 Repositories

101
latitude-dev/latitude

Entwicklerorientierte integrierte Analysen

latitude-dev
⭐ 949 TypeScript 👤 latitude-dev Organization 🕐 Aktualisiert 2024-09-30 📅 Erstellt 2024-01-31
102
youssefHosni/Awesome-AI-Data-GitHub-Repos

Eine Sammlung der wichtigsten Github-Repos für ML-, KI- und Data-Science-Praktiker

youssefHosni
⭐ 946 👤 youssefHosni User 🕐 Aktualisiert 2024-12-24 📅 Erstellt 2023-05-09
103
odpi/egeria

Die Kernplattform von Project Egeria bietet Unterstützung für Open Metadata und Governance. Sie umfasst ein offenes Typsystem, einen verteilten Wissensgraphen, REST-APIs, intelligente Governance und vorgefertigte Inhalte.

odpi
⭐ 925 Java 👤 odpi Organization 🕐 Aktualisiert 2026-11-18 📅 Erstellt 2018-05-31
104
natayadev/dataengineering-roadmap

Ein weiteres Repository mit Grundkonzepten, technischen Herausforderungen und Ressourcen zur Daten-Ingenieurwesen auf Spanisch 🧙✨

natayadev
⭐ 919 👤 natayadev User 🕐 Aktualisiert 2026-02-28 📅 Erstellt 2023-11-24
105
luisguiserrano/manning

Repository für das Buch Grokking Machine Learning, von Manning Editors

luisguiserrano
⭐ 917 Jupyter Notebook 👤 luisguiserrano User 🕐 Aktualisiert 2026-11-02 📅 Erstellt 2019-03-25
106
pyspark-ai/pyspark-ai

Englische SDK für Apache Spark

pyspark-ai
⭐ 879 Python 👤 pyspark-ai Organization 🕐 Aktualisiert 2026-10-27 📅 Erstellt 2023-04-27
107
bacalhau-project/bacalhau

Community-getrieben, einfach und doch leistungsstarkes Framework für schnelles, kostengünstiges verteiltes Compute über Daten.

bacalhau-project
⭐ 878 Go 👤 bacalhau-project Organization 🕐 Aktualisiert 2026-11-19 📅 Erstellt 2021-11-05
108
CloudWise-OpenSource/FlyFish

FlyFish ist eine Coding-Plattform für Datenvisualisierung. Wir können schnell und einfach ein Datenmodell erstellen und durch Ziehen schnell eine Reihe von Datenvisualisierungslösungen generieren.

CloudWise-OpenSource
⭐ 877 JavaScript 👤 CloudWise-OpenSource Organization 🕐 Aktualisiert 2024-06-11 📅 Erstellt 2021-10-08
109
flow-php/flow

Das fortschrittlichste Datenverarbeitungs-Framework, das den Aufbau skalierbarer Datenverarbeitungs-Pipelines und den Datentransfer zwischen verschiedenen Datenquellen und -zielen ermöglicht.

flow-php
⭐ 875 PHP 👤 flow-php Organization 🕐 Aktualisiert 2026-11-20 📅 Erstellt 2021-05-23
110
NeumTry/NeumAI

Neum AI ist ein erstklassiges Framework, um die Erstellung und Synchronisierung von Vektor-Embeddings in großem Maßstab zu verwalten.

NeumTry
⭐ 864 Python 👤 NeumTry Organization 🕐 Aktualisiert 2024-01-15 📅 Erstellt 2023-09-14
111
frictionlessdata/frictionless-py

Datenmanagement-Framework für Python, das Funktionalität zur Beschreibung, Extraktion, Validierung und Transformation von tabellarischen Daten bietet

frictionlessdata
⭐ 859 Python 👤 frictionlessdata Organization 🕐 Aktualisiert 2026-10-15 📅 Erstellt 2014-12-23
112
zoltanctoth/complete-dbt-bootcamp-zero-to-hero

Ergänzende Materialien für den Udemy-Kurs "The Complete dbt (Data Build Tool) Bootcamp"

zoltanctoth
⭐ 842 Python 👤 zoltanctoth User 🕐 Aktualisiert 2026-10-05 📅 Erstellt 2022-02-24
113
ssp-data/practical-data-engineering

Praktisches Data Engineering: Ein praxisorientierter Leitfaden für Immobilienprojekte

ssp-data
⭐ 833 Jupyter Notebook 👤 ssp-data Organization 🕐 Aktualisiert 2026-06-25 📅 Erstellt 2020-11-18
114
AltimateAI/altimate-code

Open-Source-Agentic-Data-Engineering-Harness für dbt, SQL und Cloud-Data-Warehouses. Über 100 Tools, 10 Data Warehouses, KI-gestützt.

AltimateAI
⭐ 822 TypeScript 👤 AltimateAI Organization 🕐 Aktualisiert 2026-11-21 📅 Erstellt 2026-02-27
115
Nike-Inc/koheesio

Python-Framework zum Erstellen effizienter Datenpipelines. Es fördert Modularität und Zusammenarbeit und ermöglicht die Erstellung komplexer Pipelines aus einfachen, wiederverwendbaren Komponenten.

Nike-Inc
⭐ 818 Python 👤 Nike-Inc Organization 🕐 Aktualisiert 2026-10-17 📅 Erstellt 2024-05-06
116
astronomer/airflow-guides

Anleitungen und Dokumentationen, um Sie beim Einstieg und der Inbetriebnahme von Apache Airflow zu unterstützen.

astronomer
⭐ 816 JavaScript 👤 astronomer Organization 🕐 Aktualisiert 2025-11-15 📅 Erstellt 2018-05-17
117
BasPH/data-pipelines-with-apache-airflow

Code für Data Pipelines mit Apache Airflow

BasPH
⭐ 810 Python 👤 BasPH User 🕐 Aktualisiert 2024-08-15 📅 Erstellt 2019-06-10
118
liuhuanyong/ChainKnowledgeGraph

ChainKnowledgeGraph, das branchenbezogene Wissensdiagramm, umfasst 3 Arten von Entitäten: börsennotierte A-Aktienunternehmen, Branchen und Produkte, einschließlich Branchenzugehörigkeitsbeziehungen von börsennotierten Unternehmen, übergeordnete Branchenbeziehungen, vorgelagerte Rohstoffbeziehungen von Produkten, nachgelagerte Produktbeziehungen, Hauptprodukte von Unternehmen und Produktunterkategorien, insgesamt 6 Hauptkategorien. Börsennotierte Unternehmen: 4.654, Branchen: 511, Produkte: 95.559, vorgelagerte Rohstoffe: 56.824, übergeordnete Branchen: 480, nachgelagerte Produkte: 390, Produktunterkategorien: 52.937, zugehörige Branchen: 3.946.

liuhuanyong
⭐ 779 Python 👤 liuhuanyong User 🕐 Aktualisiert 2025-12-22 📅 Erstellt 2021-10-26
119
microsoft/sqlworkshops

SQL Server Workshops

microsoft
⭐ 777 Jupyter Notebook 👤 microsoft Organization 🕐 Aktualisiert 2024-05-14 📅 Erstellt 2019-02-05
120
datavane/datavines

Kennen Sie Ihre Daten besser! Datavines ist die Next-gen Data Observability Platform, die Metadatenverwaltung und Datenqualität unterstützt.

datavane
⭐ 769 Java 👤 datavane Organization 🕐 Aktualisiert 2026-07-27 📅 Erstellt 2022-04-02
121
derar-alhussein/Databricks-Certified-Data-Engineer-Associate

Die Ressourcen des Vorbereitungskurses für die Databricks Data Engineer Associate Zertifizierungsprüfung

derar-alhussein
⭐ 762 Python 👤 derar-alhussein User 🕐 Aktualisiert 2026-11-12 📅 Erstellt 2022-11-06
122
unytics/bigfunctions

Beschleunigen Sie BigQuery mit BigFunctions

unytics
⭐ 761 Python 👤 unytics User 🕐 Aktualisiert 2026-08-23 📅 Erstellt 2022-08-24
123
defog-ai/sql-eval

Bewerten Sie die Genauigkeit der von LLMs generierten Ausgaben

defog-ai
⭐ 744 Jupyter Notebook 👤 defog-ai Organization 🕐 Aktualisiert 2025-08-14 📅 Erstellt 2023-08-10
124
kennethleungty/Failed-ML

Zusammenstellung von aufsehenerregenden realen Beispielen für gescheiterte Machine-Learning-Projekte

kennethleungty
⭐ 743 👤 kennethleungty User 🕐 Aktualisiert 2024-06-14 📅 Erstellt 2022-08-15
125
DataExpert-io/cumulative-table-design

Dieses Repository hilft dabei, Menschen zu lehren, wie kumulative Tabellen korrekt definiert und erstellt werden!

DataExpert-io
⭐ 741 Python 👤 DataExpert-io Organization 🕐 Aktualisiert 2024-10-29 📅 Erstellt 2021-12-30
126
databricks/devrel

Dieses Repository enthält die Notebooks und Präsentationen, die wir für unsere Databricks Tech Talks "

databricks
⭐ 734 HTML 👤 databricks Organization 🕐 Aktualisiert 2025-01-06 📅 Erstellt 2020-04-03
127
awslabs/aws-glue-libs

AWS Glue-Bibliotheken sind Ergänzungen und Erweiterungen zu Spark für ETL-Operationen.

awslabs
⭐ 701 Python 👤 awslabs Organization 🕐 Aktualisiert 2026-10-30 📅 Erstellt 2017-08-11
128
dgarnitz/vectorflow

VectorFlow ist eine High-Volume-Vektoreinbettungspipeline, die Rohdaten aufnimmt, in Vektoren umwandelt und in eine von Ihnen gewählte Vektordatenbank schreibt.

dgarnitz
⭐ 698 Python 👤 dgarnitz User 🕐 Aktualisiert 2024-05-16 📅 Erstellt 2023-07-25
129
risesoft-y9/DataFlow-Engine

Die Datenstrom-Engine ist eine datengesteuerte Basis-Engine für Datenintegration, Datensynchronisation, Datenaustausch, Datenteilung, Aufgabenerstellung und Aufgabenplanung. Die Datenstrom-Engine verwendet Architekturen wie Trennung von Steuerung und Ausführung, mehrschichtige Ströme und eine Plugin-Bibliothek, um die tatsächlichen Datenprobleme großer Datenmengen, häufiger Datenberichte, häufiger Datenerfassung und heterogener Datenkompatibilität zu bewältigen.

risesoft-y9
⭐ 697 Java 👤 risesoft-y9 Organization 🕐 Aktualisiert 2026-11-12 📅 Erstellt 2024-08-26
130
petedannemann/gis-programming-roadmap

One-Stop-Shop für all Ihre GIS-Programmierungsbedürfnisse

petedannemann
⭐ 686 👤 petedannemann User 🕐 Aktualisiert 2024-01-02 📅 Erstellt 2019-01-11
131
kaushiksrini/parqeye

Werfen Sie einen Blick in Parquet-Dateien direkt von Ihrem Terminal aus

kaushiksrini
⭐ 682 Rust 👤 kaushiksrini User 🕐 Aktualisiert 2026-11-12 📅 Erstellt 2025-07-02
132
databricks/reference-apps

Spark-Referenzanwendungen

databricks
⭐ 652 Scala 👤 databricks Organization 🕐 Aktualisiert 2024-10-03 📅 Erstellt 2014-08-19
133
JakobGM/patito

Eine Datenmodellierungsschicht, die auf polars und pydantic aufbaut

JakobGM
⭐ 643 Python 👤 JakobGM User 🕐 Aktualisiert 2026-05-08 📅 Erstellt 2023-06-21
134
rpbouman/huey

Browserbasierte Datenanalyse und BI mit DuckDB-WASM. Datenschutz an erster Stelle: Ihre Daten bleiben lokal; kein Server erforderlich.

rpbouman
⭐ 639 JavaScript 👤 rpbouman User 🕐 Aktualisiert 2026-11-13 📅 Erstellt 2023-12-25
135
google/patents-public-data

Patentanalyse mit den Google Patents Public Datasets auf BigQuery

google
⭐ 637 Jupyter Notebook 👤 google Organization 🕐 Aktualisiert 2024-06-17 📅 Erstellt 2017-06-05
136
dbt-labs/dbt-mcp

Ein MCP (Model Context Protocol) Server zur Interaktion mit dbt.

dbt-labs
⭐ 624 Python 👤 dbt-labs Organization 🕐 Aktualisiert 2026-11-18 📅 Erstellt 2025-03-12
137
ConduitIO/conduit

Conduit überträgt Daten zwischen Datenspeichern. Ersatz für Kafka Connect. Kein JVM erforderlich.

ConduitIO
⭐ 617 Go 👤 ConduitIO Organization 🕐 Aktualisiert 2026-11-21 📅 Erstellt 2022-01-11
138
synmetrix/synmetrix

Synmetrix – produktionsreife Open-Source semantische Ebene auf Cube

synmetrix
⭐ 616 JavaScript 👤 synmetrix Organization 🕐 Aktualisiert 2025-02-07 📅 Erstellt 2021-06-18
139
insitro/redun

Schon wieder eine redundante Workflow-Engine

insitro
⭐ 610 Python 👤 insitro Organization 🕐 Aktualisiert 2026-11-18 📅 Erstellt 2021-11-04
140
matsonj/nba-monte-carlo

Monte-Carlo-Simulation der NBA-Saison unter Verwendung von dbt, duckdb und evidence.dev

matsonj
⭐ 609 Python 👤 matsonj User 🕐 Aktualisiert 2026-11-12 📅 Erstellt 2022-09-29
141
apecloud/myduckserver

Vereinheitlichte MySQL-, Postgres- & FlightSQL-Server, angetrieben von DuckDB.

apecloud
⭐ 595 Go 👤 apecloud Organization 🕐 Aktualisiert 2026-09-19 📅 Erstellt 2024-08-22
142
argilla-io/synthetic-data-generator

Datensätze mit natürlicher Sprache erstellen

argilla-io
⭐ 590 Python 👤 argilla-io Organization 🕐 Aktualisiert 2025-09-19 📅 Erstellt 2024-11-21
143
singer-io/singer-python

Schreibt das Singer-Format aus Python

singer-io
⭐ 585 Python 👤 singer-io Organization 🕐 Aktualisiert 2026-11-02 📅 Erstellt 2016-10-28
144
taz4et/bitcoin-etl

Ein Python-Toolkit zum Extrahieren und Transformieren von Bitcoin-Blockchain-Daten in strukturierte Formate.

taz4et
⭐ 580 Python 👤 taz4et User 🕐 Aktualisiert 2025-11-24 📅 Erstellt 2025-11-14
145
spark-examples/spark-scala-examples

Dieses Projekt bietet Beispiele für Apache Spark SQL, RDD, DataFrame und Dataset in der Scala-Sprache.

spark-examples
⭐ 567 Scala 👤 spark-examples Organization 🕐 Aktualisiert 2024-03-20 📅 Erstellt 2019-11-26
146
pracdata/awesome-open-source-data-engineering

Kuratiertes Verzeichnis von Open-Source-Tools, die in Analytics-Plattformen und dem Data-Engineering-Ökosystem verwendet werden

pracdata
⭐ 564 👤 pracdata Organization 🕐 Aktualisiert 2025-03-12 📅 Erstellt 2024-02-22
147
GoogleCloudPlatform/bigquery-oreilly-book

Begleitender Quellcode: BigQuery: The Definitive Guide von Lakshmanan & Tigani, das von O'Reilly Media veröffentlicht wird

GoogleCloudPlatform
⭐ 547 Jupyter Notebook 👤 GoogleCloudPlatform Organization 🕐 Aktualisiert 2024-05-02 📅 Erstellt 2018-11-26
148
kimtth/software-architect-mindmap

🧠 Mindmap zu 🗺️ Softwarearchitektur und Softwaretechnik

kimtth
⭐ 543 Python 👤 kimtth User 🕐 Aktualisiert 2026-11-20 📅 Erstellt 2022-02-02
149
kvakvs/beam-wisdoms

Wiki mit Stücken von Informationen und Wissen über die BEAM Virtual Machine (die Erlang/OTP und andere BEAM-basierte Sprachen ausführt).

kvakvs
⭐ 539 👤 kvakvs User 🕐 Aktualisiert 2024-06-10 📅 Erstellt 2016-08-27
150
silver-dev-org/interview-ready

Ein Repository zur Vorbereitung auf Vorstellungsgespräche.

silver-dev-org
⭐ 529 TypeScript 👤 silver-dev-org Organization 🕐 Aktualisiert 2026-02-05 📅 Erstellt 2023-08-22