Git Stars Git Stars

#etl Репозитории

105
Всего репозиториев
408,616
Всего звезд
3,891
Среднее количество звезд на репозиторий

Всего репозиториев: 105

51
datavane/tis

Поддержка гибких Ontology DataOps на базе Flink, DataX и Flink-CDC через веб-интерфейс

datavane
⭐ 1,448 Java 👤 datavane Organization 🕐 Обновлено 2026-11-20 📅 Создано 2019-01-23
52
toluaina/pgsync

Синхронизация Postgres, MySQL или MariaDB с Elasticsearch/OpenSearch

toluaina
⭐ 1,433 Python 👤 toluaina User 🕐 Обновлено 2026-11-20 📅 Создано 2019-08-17
53
xitongsys/parquet-go

Чистая библиотека Golang для чтения/записи файлов Parquet

xitongsys
⭐ 1,432 Go 👤 xitongsys User 🕐 Обновлено 2026-05-08 📅 Создано 2017-09-02
54
amphi-ai/amphi-etl

Визуальная подготовка данных, обеспечиваемая Python

amphi-ai
⭐ 1,410 TypeScript 👤 amphi-ai Organization 🕐 Обновлено 2026-08-24 📅 Создано 2024-03-20
55
spark-examples/pyspark-examples

Примеры PySpark RDD, DataFrame и Dataset на языке Python

spark-examples
⭐ 1,371 Python 👤 spark-examples Organization 🕐 Обновлено 2025-12-07 📅 Создано 2019-11-26
56
gtoonstra/etl-with-airflow

Лучшие практики ETL с Airflow, с примерами

gtoonstra
⭐ 1,353 Shell 👤 gtoonstra User 🕐 Обновлено 2024-09-25 📅 Создано 2016-10-16
57
yhat/pandasql

sqldf для pandas

yhat
⭐ 1,351 Python 👤 yhat Organization 🕐 Обновлено 2024-07-24 📅 Создано 2013-02-18
58
subsquid/squid-sdk

Инструментарий ETL на TypeScript для индексации данных Ethereum, Solana и Substrate, полученных из SQD Network.

subsquid
⭐ 1,347 TypeScript 👤 subsquid Organization 🕐 Обновлено 2026-11-20 📅 Создано 2021-12-10
59
singer-io/getting-started

Этот репозиторий является руководством по быстрому старту для Singer.

singer-io
⭐ 1,342 Makefile 👤 singer-io Organization 🕐 Обновлено 2025-08-08 📅 Создано 2016-10-31
60
rwynn/monstache

Демон на Go, который синхронизирует MongoDB с Elasticsearch в реальном времени. Знаешь, для поиска.

rwynn
⭐ 1,331 Go 👤 rwynn User 🕐 Обновлено 2025-08-22 📅 Создано 2016-05-14
61
2ndQuadrant/pglogical

Расширение для логической репликации для PostgreSQL 17, 16, 15, 14, 13, 12, 11, 10, 9.6, 9.5, 9.4 (Postgres), обеспечивающее гораздо более быструю репликацию, чем Slony, Bucardo или Londiste, а также обновления между версиями.

2ndQuadrant
⭐ 1,243 C 👤 2ndQuadrant Organization 🕐 Обновлено 2026-07-28 📅 Создано 2016-05-10
62
react-csv/react-csv

Компоненты React для создания файлов CSV на лету на основе Array/литерального объекта данных

react-csv
⭐ 1,182 JavaScript 👤 react-csv Organization 🕐 Обновлено 2024-04-03 📅 Создано 2016-11-25
63
DataWithBaraa/sql-data-warehouse-project

Создайте хранилище данных в SQL Server на основе двух исходных систем — CRM и ERP — с использованием слоёв bronze, silver и gold. Файлы и скрипты полного бесплатного проекта.

DataWithBaraa
⭐ 1,089 TSQL 👤 DataWithBaraa User 🕐 Обновлено 2026-11-06 📅 Создано 2024-12-30
64
jf-tech/omniparser

omniparser: нативная библиотека Golang для парсинга и трансформации потоковых данных ETL для CSV, JSON, XML, EDI, текста и т. д.

jf-tech
⭐ 1,085 Go 👤 jf-tech User 🕐 Обновлено 2026-10-11 📅 Создано 2020-08-16
65
dataform-co/dataform

Dataform — это фреймворк для управления операциями с данными на основе SQL в BigQuery.

dataform-co
⭐ 998 TypeScript 👤 dataform-co Organization 🕐 Обновлено 2026-11-20 📅 Создано 2018-09-03
66
estuary/flow

🌊 Непрерывно синхронизируйте системы, в которых находятся ваши данные, с системами, в которых вы _хотите_ их видеть, управляя потоками данных с помощью Estuary. 🌊

estuary
⭐ 995 Rust 👤 estuary Organization 🕐 Обновлено 2026-11-21 📅 Создано 2020-02-13
67
uniVocity/univocity-parsers

uniVocity-parsers — это набор чрезвычайно быстрых и надежных парсеров для Java. Он предоставляет согласованный интерфейс для работы с различными форматами файлов и надежную основу для разработки новых парсеров.

uniVocity
⭐ 931 Java 👤 uniVocity Organization 🕐 Обновлено 2024-08-17 📅 Создано 2014-07-12
68
slingdata-io/sling-cli

Sling — это инструмент командной строки (CLI), который извлекает данные из исходного хранилища/базы данных и загружает их в целевое хранилище/базу данных.

slingdata-io
⭐ 926 Go 👤 slingdata-io Organization 🕐 Обновлено 2026-11-20 📅 Создано 2020-10-15
69
flow-php/flow

Самая продвинутая платформа для обработки данных, позволяющая создавать масштабируемые конвейеры обработки данных и перемещать данные между различными источниками и назначениями данных.

flow-php
⭐ 875 PHP 👤 flow-php Organization 🕐 Обновлено 2026-11-20 📅 Создано 2021-05-23
70
NeumTry/NeumAI

Neum AI — это лучшая в своем классе платформа для управления созданием и синхронизацией векторных вложений в больших масштабах.

NeumTry
⭐ 864 Python 👤 NeumTry Organization 🕐 Обновлено 2024-01-15 📅 Создано 2023-09-14
71
Cinchoo/ChoETL

ETL-фреймворк для .NET (Парсер / Записыватель для файлов в форматах CSV, Flat, Xml, JSON, Key-Value, Parquet, Yaml, Avro)

Cinchoo
⭐ 860 C# 👤 Cinchoo User 🕐 Обновлено 2026-10-19 📅 Создано 2016-10-19
72
aelassas/wexflow

Механизм автоматизации рабочих процессов

aelassas
⭐ 845 C# 👤 aelassas User 🕐 Обновлено 2026-11-16 📅 Создано 2022-10-29
73
awslabs/python-deequ

Python API для Deequ

awslabs
⭐ 826 Jupyter Notebook 👤 awslabs Organization 🕐 Обновлено 2026-10-24 📅 Создано 2020-11-09
74
pgflo/pg_flo

Потоковая передача, преобразование и маршрутизация данных PostgreSQL в режиме реального времени.

pgflo
⭐ 825 Go 👤 pgflo Organization 🕐 Обновлено 2025-12-29 📅 Создано 2024-09-02
75
paillave/Etl.Net

Массовый обработка данных с полным ETL для разработчиков .NET

paillave
⭐ 812 C# 👤 paillave User 🕐 Обновлено 2026-10-09 📅 Создано 2018-06-23
76
BasPH/data-pipelines-with-apache-airflow

Код для пайплайнов данных с Apache Airflow

BasPH
⭐ 810 Python 👤 BasPH User 🕐 Обновлено 2024-08-15 📅 Создано 2019-06-10
77
kzaremski/apple-notes-exporter

Приложение для macOS, написанное на Swift, которое выполняет пакетный экспорт заметок Apple (включая заметки iCloud) в различные форматы с сохранением структуры папок.

kzaremski
⭐ 780 Swift 👤 kzaremski User 🕐 Обновлено 2026-09-19 📅 Создано 2023-02-15
78
raystack/optimus

Optimus — это простой в использовании, надежный и высокопроизводительный оркестратор рабочих процессов для преобразования данных, моделирования данных, конвейеров и управления качеством данных.

raystack
⭐ 757 Go 👤 raystack Organization 🕐 Обновлено 2024-06-08 📅 Создано 2021-03-22
79
microsoft/etl2pcapng

Утилита, которая конвертирует файл .etl, содержащий захват сетевых пакетов Windows, в формат .pcapng.

microsoft
⭐ 718 C 👤 microsoft Organization 🕐 Обновлено 2025-06-05 📅 Создано 2019-09-16
80
koopjs/koop

Преобразуйте, запрашивайте и загружайте геопространственные данные в Интернете.

koopjs
⭐ 715 JavaScript 👤 koopjs Organization 🕐 Обновлено 2026-11-16 📅 Создано 2013-07-20
81
neuml/paperetl

📄 ⚙️ Процессы ETL для медицинских и научных статей

neuml
⭐ 701 Python 👤 neuml Organization 🕐 Обновлено 2025-12-07 📅 Создано 2020-07-10
82
awslabs/aws-glue-libs

Библиотеки AWS Glue — это дополнения и улучшения Spark для операций ETL.

awslabs
⭐ 701 Python 👤 awslabs Organization 🕐 Обновлено 2026-10-30 📅 Создано 2017-08-11
83
elastic/eland

Клиент и набор инструментов Python для DataFrames, Big Data, Machine Learning и ETL в Elasticsearch

elastic
⭐ 693 Python 👤 elastic Organization 🕐 Обновлено 2026-06-16 📅 Создано 2019-06-11
84
tableau/webdataconnector

Внесите в Tableau данные, которые вам важны

tableau
⭐ 688 HTML 👤 tableau Organization 🕐 Обновлено 2026-10-19 📅 Создано 2015-10-12
85
dbt-labs/dbt-codegen

Макросы, генерирующие код dbt

dbt-labs
⭐ 677 Makefile 👤 dbt-labs Organization 🕐 Обновлено 2026-10-01 📅 Создано 2019-06-10
86
datacleaner/DataCleaner

Ведущее решение для обеспечения качества данных с открытым исходным кодом

datacleaner
⭐ 646 Java 👤 datacleaner Organization 🕐 Обновлено 2026-11-15 📅 Создано 2014-02-20
87
catalyst-cooperative/pudl

Проект освобождения данных общественных коммунальных услуг предоставляет готовые для анализа данные энергетических систем климатическим активистам, исследователям, политикам и журналистам.

catalyst-cooperative
⭐ 621 Python 👤 catalyst-cooperative Organization 🕐 Обновлено 2026-11-21 📅 Создано 2017-02-01
88
josephmachado/beginner_de_project

Проект по инженерии данных для начинающих - пакетная версия

josephmachado
⭐ 620 HTML 👤 josephmachado User 🕐 Обновлено 2026-04-13 📅 Создано 2020-05-23
89
ConduitIO/conduit

Conduit передает данные между хранилищами данных. Замена Kafka Connect. JVM не требуется.

ConduitIO
⭐ 617 Go 👤 ConduitIO Organization 🕐 Обновлено 2026-11-21 📅 Создано 2022-01-11
90
apecloud/ape-dts

Комплект для передачи данных ApeCloud, написанный на Rust. Обеспечивает сверхбыструю репликацию данных между MySQL, PostgreSQL, Redis, MongoDB, Kafka и ClickHouse, идеально подходит для сценариев аварийного восстановления (DR) и миграции.

apecloud
⭐ 616 Rust 👤 apecloud Organization 🕐 Обновлено 2026-11-20 📅 Создано 2023-01-12
91
insitro/redun

Еще один избыточный движок рабочего процесса

insitro
⭐ 610 Python 👤 insitro Organization 🕐 Обновлено 2026-11-18 📅 Создано 2021-11-04
92
aryn-ai/sycamore

Sycamore — это платформа для поиска и анализа неструктурированных данных на базе LLM.

aryn-ai
⭐ 605 Python 👤 aryn-ai Organization 🕐 Обновлено 2026-08-01 📅 Создано 2023-07-07
93
Datavault-UK/automate-dv

Бесплатный пакет dbt для создания и загрузки хранилищ данных, соответствующих Data Vault 2.0 (работает на dbt, инструменте инженерии данных с открытым исходным кодом, зарегистрированная торговая марка dbt Labs)

Datavault-UK
⭐ 599 👤 Datavault-UK Organization 🕐 Обновлено 2026-02-05 📅 Создано 2019-09-27
94
YotpoLtd/metorikku

Упрощённый и лёгкий ETL-фреймворк на базе Apache Spark

YotpoLtd
⭐ 589 Scala 👤 YotpoLtd Organization 🕐 Обновлено 2026-09-01 📅 Создано 2017-10-10
95
singer-io/singer-python

Записывает формат Singer из Python

singer-io
⭐ 585 Python 👤 singer-io Organization 🕐 Обновлено 2026-11-02 📅 Создано 2016-10-28
96
taz4et/bitcoin-etl

Инструментарий Python для извлечения и преобразования данных блокчейна Биткойн в структурированные форматы.

taz4et
⭐ 580 Python 👤 taz4et User 🕐 Обновлено 2025-11-24 📅 Создано 2025-11-14
97
stn1slv/awesome-integration

Курируемый список замечательных программных обеспечений и ресурсов для системной интеграции.

stn1slv
⭐ 572 Markdown 👤 stn1slv User 🕐 Обновлено 2026-11-21 📅 Создано 2021-07-23
98
JoeyBling/webkettle

Набор инструментов распределенного комплексного планирования, управления и разработки ETL для пользователей профессиональной версии с архитектурой B/S, разработанный на основе веб-версии Kettle

JoeyBling
⭐ 572 JavaScript 👤 JoeyBling User 🕐 Обновлено 2024-06-25 📅 Создано 2018-05-23
99
pracdata/awesome-open-source-data-engineering

Куратированный список инструментов с открытым исходным кодом, используемых в аналитических платформах и экосистеме инженерии данных

pracdata
⭐ 564 👤 pracdata Organization 🕐 Обновлено 2025-03-12 📅 Создано 2024-02-22
100
vlm-run/vlmrun-hub

Центр для различных отраслевых схем, которые будут использоваться с VLM.

vlm-run
⭐ 555 Python 👤 vlm-run Organization 🕐 Обновлено 2025-12-15 📅 Создано 2024-11-11