#etl Repository
105 repository in totale
Supporto a DataOps agili per le ontologie basati su Flink, DataX e Flink-CDC tramite un'interfaccia Web
Toolkit ETL in TypeScript per l'indicizzazione di dati Ethereum, Solana e Substrate, provenienti da SQD Network.
Un demone Go che sincronizza MongoDB su Elasticsearch in tempo reale. Sai, per la ricerca.
Estensione di Replica Logica per PostgreSQL 17, 16, 15, 14, 13, 12, 11, 10, 9.6, 9.5, 9.4 (Postgres), che fornisce una replica molto piรน veloce di Slony, Bucardo o Londiste, nonchรฉ aggiornamenti tra versioni.
Componenti React per creare file CSV in tempo reale basati su Array/oggetto letterale di dati
Crea un data warehouse in SQL Server a partire da due sistemi sorgente, un CRM e un ERP, passando per i livelli bronze, silver e gold. File e script del progetto completo gratuito.
omniparser: un parser e una libreria di trasformazione ETL nativa per Golang per CSV, JSON, XML, EDI, testo, ecc.
Dataform รจ un framework per la gestione di operazioni sui dati basate su SQL in BigQuery.
๐ Sincronizza continuamente i sistemi in cui risiedono i tuoi dati con i sistemi in cui _vuoi_ che risiedano, gestendo i tuoi flussi di dati con Estuary. ๐
uniVocity-parsers รจ una suite di parser estremamente veloci e affidabili per Java. Fornisce un'interfaccia coerente per la gestione di diversi formati di file e un solido framework per lo sviluppo di nuovi parser.
Sling รจ uno strumento CLI che estrae dati da uno storage/database di origine e li carica in uno storage/database di destinazione.
Il framework di elaborazione dati piรน avanzato che consente di creare pipeline di elaborazione dati scalabili e spostare dati tra varie origini e destinazioni dati.
Neum AI รจ un framework di prim'ordine per gestire la creazione e la sincronizzazione di embedding vettoriali su larga scala.
Framework ETL per .NET (Parser / Writer per file formattati CSV, Flat, Xml, JSON, Key-Value, Parquet, Yaml, Avro)
App per macOS scritta in Swift che esporta in blocco le note Apple (incluse le note iCloud) in una moltitudine di formati, preservando la struttura delle cartelle delle note.
Optimus รจ un orchestratore di workflow facile da usare, affidabile e performante per la trasformazione dei dati, la modellazione dei dati, le pipeline e la gestione della qualitร dei dati.
Utilitร che converte un file .etl contenente una cattura di pacchetti di rete Windows nel formato .pcapng.
Le librerie AWS Glue sono aggiunte e miglioramenti a Spark per le operazioni ETL.
Client e Toolkit Python per DataFrames, Big Data, Machine Learning e ETL in Elasticsearch
Il Public Utility Data Liberation Project fornisce dati sui sistemi energetici pronti per l'analisi a difensori del clima, ricercatori, decisori politici e giornalisti.
Conduit trasmette dati tra data store. Sostituto di Kafka Connect. Nessuna JVM richiesta.
ApeCloud's Data Transfer Suite, scritta in Rust. Fornisce la replica dei dati ultraveloce tra MySQL, PostgreSQL, Redis, MongoDB, Kafka e ClickHouse, ideale per scenari di disaster recovery (DR) e migrazione.
Sycamore รจ una piattaforma di ricerca e analisi potenziata da LLM per dati non strutturati.
Un pacchetto dbt gratuito per creare e caricare Data Warehouse conformi a Data Vault 2.0 (alimentato da dbt, uno strumento di ingegneria dei dati open source, marchio registrato di dbt Labs)
Un toolkit Python per estrarre e trasformare i dati della blockchain Bitcoin in formati strutturati.
Un elenco curato di fantastici software e risorse per l'integrazione di sistemi.
Uno strumento di architettura B/S versione professionale utente per sviluppo ETL, gestione e programmazione integrata distribuita, sviluppato sulla base della versione web di Kettle
Lista curata di strumenti open source utilizzati nelle piattaforme di analisi e nell'ecosistema di data engineering