#data-integration Repositories
Entdecke 57 aktive Open-Source-GitHub-Repositories, die mit #data-integration getaggt sind und insgesamt 259,956 Sterne gesammelt haben (durchschnittlich 4,560 Sterne pro Projekt). Spitzenreiter in diesem Themenbereich ist apache/airflow mit 47,583 Sternen.
Insgesamt 57 Repositories
Apache Airflow - Eine Plattform zum programmgesteuerten Erstellen, Planen und Überwachen von Workflows
Open-Source-Datenbewegung für ELT-Pipelines und KI-Agenten — von APIs, Datenbanken und Dateien zu Data Warehouses, Data Lakes und KI-Anwendungen. Sowohl self-hosted als auch Cloud.
Verwandelt Daten und KI-Algorithmen im Handumdrehen in produktionsreife Webanwendungen.
Eine Orchestrierungsplattform für die Entwicklung, Produktion und Beobachtung von Datenassets.
SeaTunnel ist ein multimodales, hochperformantes, verteiltes Tool zur Integration massiver Datenmengen.
🧙 Erstellen, ausführen und verwalten Sie Datenpipelines für die Datenintegration und -transformation.
Datenpipelines für Cloud-Konfigurations- und Sicherheitsdaten. Erstellen Sie Lösungen für Cloud-Asset-Inventarisierung, CSPM, FinOps und Schwachstellenmanagement. Extraktion aus AWS, Azure, GCP und über 70 Cloud- und SaaS-Quellen.
DataX-Integrationsvisualisierungsseite: Wählen Sie eine Datenquelle aus, um Daten-Synchronisierungsaufgaben mit einem Klick zu generieren. Unterstützt Datenquellen wie RDBMS, Hive, HBase, ClickHouse, MongoDB usw. Batch-Erstellung von RDBMS-Daten-Synchronisierungsaufgaben, Integration eines Open-Source-Scheduling-Systems, Unterstützung für verteilte Verarbeitung, inkrementelle Synchronisation von Daten, Echtzeit-Überwachung von Ausführungslogs, Überwachung von Executor-Ressourcen, KILL laufender Prozesse, Verschlüsselung von Datenquelleninformationen usw.
🦀 Event-Stream-Verarbeitung für Entwickler, um Daten in Bewegung zu sammeln und zu transformieren, um reaktionsschnelle datenintensive Anwendungen zu ermöglichen.
Jitsu ist eine Open-Source-Alternative zu Segment. Vollständig skriptfähige Datenerfassungs-Engine für moderne Datenteams. Richten Sie eine Echtzeit-Datenpipeline in Minuten statt in Tagen ein
Datenschutz- und sicherheitsorientierte Segment-Alternative in Golang und React
ingestr ist ein CLI-Tool, um Daten mit einem einzigen Befehl nahtlos zwischen beliebigen Datenbanken zu kopieren.
Community-gekuratete Liste von Software-Paketen und Datenressourcen für Single-Cell, einschließlich RNA-seq, ATAC-seq usw.
Apache DevLake ist eine Open-Source-Plattform für Entwicklerdaten, um fragmentierte Daten aus DevOps-Tools zu erfassen, zu analysieren und zu visualisieren und Einblicke für ingenieurtechnische Exzellenz, Entwicklererfahrung und Community-Wachstum zu gewinnen.
Verbinden Sie die Daten Ihres Unternehmens, lassen Sie einen Agenten darauf aufbauend eine Ontologie erstellen und laden Sie diese als zusammenhängenden Graphen in HelixDB, den Sie erkunden und abfragen können. Gehostet auf foundry.helix-db.com oder auf Ihrem eigenen Rechner ausführbar.
:elephant: Elasticsearch Echtzeitsuche und -analyse nativ in Hadoop integriert
Open-Source-ETL/ELT, das Sie auf Ihren eigenen Servern oder in der Cloud bereitstellen. Auf DuckDB aufgebaut: visuelle No-Code-/Low-Code-Pipelines oder SQL, 446 Komponenten, dbt, CDC, Datenqualität, Reverse ETL, Datenherkunft und MCP für KI-Agenten. Keine Anbieter-Cloud, keine Abrechnung pro Zeile.
Dieses Repository speichert die N8N-Workflow-Konfigurationen, die auf meinem YouTube-Kanal geteilt werden. Benutzer können die JSON-Dateien direkt herunterladen und zur Verwendung in N8N importieren.
Aktiv gepflegter Nachfolger von Alibaba DataX – ein schnelles, vielseitiges Open-Source-ETL-Tool für mehr als 30 RDBMS- und NoSQL-Datenquellen.
Dropbase hilft Entwicklern, Web-Apps mit KI schneller zu erstellen und zu prototypisieren. Dropbase ist lokal-basiert und wird selbst gehostet.
Einblicksreiche Tutorials und Papers über Wissensgraphen
🌊 Synchronisieren Sie kontinuierlich die Systeme, in denen Ihre Daten leben, mit den Systemen, in denen Sie sie _haben_ möchten, indem Sie Ihre Datenflüsse mit Estuary verwalten. 🌊
qData ist eine leichtgewichtige, funktionsreiche und KI-native Open-Source-Datenplattform. Sie deckt Datenintegration, -entwicklung, -modellierung und -governance sowie Datenbestände und API-Dienste ab und unterstützt selbst gehostete Bereitstellung, flexible Skalierung und kommerzielle Nutzung.
SeaTunnel ist eine verteilte, hochleistungsfähige Datenintegrationsplattform für die Synchronisation und Transformation riesiger Datenmengen (Offline & Echtzeit).
Datenbankreplikationsplattform, die Change Data Capture nutzt. Streamen Sie Produktionsdaten in Echtzeit von Datenbanken in Ihr Data Warehouse (Snowflake, BigQuery, Redshift, Databricks).
Kontinuierlich aktualisierte Liste von Papieren zu Fortschritten bei Data Agents. Begleit-Repository zu unserem Paper „A Survey of Data Agents: Emerging Paradigm or Overstated Hype?“
NicheNet: Vorhersage aktiver Ligand-Ziel-Verbindungen zwischen interagierenden Zellen
Schnelle, sensible und genaue Integration von Single-Cell-Daten mit Harmony
Conduit überträgt Daten zwischen Datenspeichern. Ersatz für Kafka Connect. Kein JVM erforderlich.
Der Amazon Athena Query Federation SDK ermöglicht es Ihnen, Amazon Athena mit Ihren eigenen Datenquellen und Code anzupassen.
Python-Bibliothek zum Trainieren von neuronalen Netzen mit starkem Fokus auf hydrologische Anwendungen.
Dieses Tutorial erklärt Schritt für Schritt, wie Sie Ihre Daten mit der Charting Library verbinden
Häufig gestellte Fragen
Welches ist das beliebteste #data-integration-Repository auf GitHub?
Das am höchsten eingestufte Open-Source-#data-integration-Projekt auf GitHub ist apache/airflow mit 47,583 Sternen. Apache Airflow - Eine Plattform zum programmgesteuerten Erstellen, Planen und Überwachen von Workflows
Welche Programmiersprachen werden in #data-integration-Repositories am häufigsten verwendet?
Unter den am höchsten eingestuften #data-integration-Projekten auf GitHub sind Java, Python, Go, Rust die am häufigsten verwendeten Programmiersprachen.
Wie wird das Ranking der #data-integration-Repositories berechnet?
Wir verfolgen 57 aktive Open-Source-Repositories, die mit #data-integration getaggt sind (500+ Sterne), mit insgesamt 259,956 Sternen und durchschnittlich 4,560 Sternen pro Repository. Die Rankings werden täglich über die GitHub-API aktualisiert.