Git Stars Git Stars

#data-engineering Репозитории

152
Всего репозиториев
727,632
Всего звезд
4,787
Среднее количество звезд на репозиторий

Всего репозиториев: 152

101
latitude-dev/latitude

Встраиваемая аналитика, ориентированная на разработчиков

latitude-dev
⭐ 949 TypeScript 👤 latitude-dev Organization 🕐 Обновлено 2024-09-30 📅 Создано 2024-01-31
102
youssefHosni/Awesome-AI-Data-GitHub-Repos

Коллекция самых важных репозиториев Github для специалистов по ML, AI и науке о данных

youssefHosni
⭐ 946 👤 youssefHosni User 🕐 Обновлено 2024-12-24 📅 Создано 2023-05-09
103
odpi/egeria

Основная платформа Project Egeria обеспечивает поддержку Open Metadata и Governance. Она включает открытую систему типов, распределённый граф знаний, REST API, интеллектуальное управление и готовый контент.

odpi
⭐ 925 Java 👤 odpi Organization 🕐 Обновлено 2026-11-18 📅 Создано 2018-05-31
104
natayadev/dataengineering-roadmap

Еще один репозиторий с базовыми концепциями, техническими проблемами и ресурсами по инженерии данных на испанском языке 🧙✨

natayadev
⭐ 919 👤 natayadev User 🕐 Обновлено 2026-02-28 📅 Создано 2023-11-24
105
luisguiserrano/manning

Репозиторий для книги Grokking Machine Learning, от Manning Editors

luisguiserrano
⭐ 917 Jupyter Notebook 👤 luisguiserrano User 🕐 Обновлено 2026-11-02 📅 Создано 2019-03-25
106
pyspark-ai/pyspark-ai

Английский SDK для Apache Spark

pyspark-ai
⭐ 879 Python 👤 pyspark-ai Organization 🕐 Обновлено 2026-10-27 📅 Создано 2023-04-27
107
bacalhau-project/bacalhau

Разработанный сообществом, простой, но мощный фреймворк для быстрого, экономичного распределенного вычисления над данными.

bacalhau-project
⭐ 878 Go 👤 bacalhau-project Organization 🕐 Обновлено 2026-11-19 📅 Создано 2021-11-05
108
CloudWise-OpenSource/FlyFish

FlyFish — это платформа для кодирования визуализации данных. Мы можем быстро и просто создать модель данных, а затем с помощью перетаскивания быстро сгенерировать набор решений для визуализации данных.

CloudWise-OpenSource
⭐ 877 JavaScript 👤 CloudWise-OpenSource Organization 🕐 Обновлено 2024-06-11 📅 Создано 2021-10-08
109
flow-php/flow

Самая продвинутая платформа для обработки данных, позволяющая создавать масштабируемые конвейеры обработки данных и перемещать данные между различными источниками и назначениями данных.

flow-php
⭐ 875 PHP 👤 flow-php Organization 🕐 Обновлено 2026-11-20 📅 Создано 2021-05-23
110
NeumTry/NeumAI

Neum AI — это лучшая в своем классе платформа для управления созданием и синхронизацией векторных вложений в больших масштабах.

NeumTry
⭐ 864 Python 👤 NeumTry Organization 🕐 Обновлено 2024-01-15 📅 Создано 2023-09-14
111
frictionlessdata/frictionless-py

Каркас управления данными для Python, предоставляющий функциональность для описания, извлечения, проверки и преобразования табличных данных

frictionlessdata
⭐ 859 Python 👤 frictionlessdata Organization 🕐 Обновлено 2026-10-15 📅 Создано 2014-12-23
112
zoltanctoth/complete-dbt-bootcamp-zero-to-hero

Дополнительные материалы для курса Udemy "The Complete dbt (Data Build Tool) Bootcamp"

zoltanctoth
⭐ 842 Python 👤 zoltanctoth User 🕐 Обновлено 2026-10-05 📅 Создано 2022-02-24
113
ssp-data/practical-data-engineering

Практическая инженерия данных: практическое руководство по проектам в сфере недвижимости

ssp-data
⭐ 833 Jupyter Notebook 👤 ssp-data Organization 🕐 Обновлено 2026-06-25 📅 Создано 2020-11-18
114
AltimateAI/altimate-code

Открытая агентная платформа для инженерной обработки данных для dbt, SQL и облачных хранилищ данных. 100+ инструментов, 10 хранилищ, на базе ИИ.

AltimateAI
⭐ 822 TypeScript 👤 AltimateAI Organization 🕐 Обновлено 2026-11-21 📅 Создано 2026-02-27
115
Nike-Inc/koheesio

Python-фреймворк для создания эффективных конвейеров данных. Он способствует модульности и сотрудничеству, позволяя создавать сложные конвейеры из простых, многократно используемых компонентов.

Nike-Inc
⭐ 818 Python 👤 Nike-Inc Organization 🕐 Обновлено 2026-10-17 📅 Создано 2024-05-06
116
astronomer/airflow-guides

Руководства и документация, чтобы помочь вам начать и запустить Apache Airflow.

astronomer
⭐ 816 JavaScript 👤 astronomer Organization 🕐 Обновлено 2025-11-15 📅 Создано 2018-05-17
117
BasPH/data-pipelines-with-apache-airflow

Код для пайплайнов данных с Apache Airflow

BasPH
⭐ 810 Python 👤 BasPH User 🕐 Обновлено 2024-08-15 📅 Создано 2019-06-10
118
liuhuanyong/ChainKnowledgeGraph

ChainKnowledgeGraph, граф знаний производственной цепочки включает компании, котирующиеся на бирже A, отрасли и продукты, всего 3 типа сущностей, включая отношения принадлежности к отрасли для котируемых компаний, отношения вышестоящих отраслей, отношения исходных материалов для продуктов, отношения последующих продуктов, основные продукты компаний и подкатегории продуктов, всего 6 основных категорий. Котируемые компании: 4 654, отрасли: 511, продукты: 95 559, исходные материалы: 56 824, вышестоящие отрасли: 480, последующие продукты: 390, подкатегории продуктов: 52 937, относящиеся отрасли: 3 946.

liuhuanyong
⭐ 779 Python 👤 liuhuanyong User 🕐 Обновлено 2025-12-22 📅 Создано 2021-10-26
119
microsoft/sqlworkshops

Семинары SQL Server

microsoft
⭐ 777 Jupyter Notebook 👤 microsoft Organization 🕐 Обновлено 2024-05-14 📅 Создано 2019-02-05
120
datavane/datavines

Узнайте свои данные лучше! Datavines — это платформа нового поколения для наблюдения за данными, поддерживающая управление метаданными и качество данных.

datavane
⭐ 769 Java 👤 datavane Organization 🕐 Обновлено 2026-07-27 📅 Создано 2022-04-02
121
derar-alhussein/Databricks-Certified-Data-Engineer-Associate

Ресурсы подготовительного курса для экзамена Databricks Data Engineer Associate

derar-alhussein
⭐ 762 Python 👤 derar-alhussein User 🕐 Обновлено 2026-11-12 📅 Создано 2022-11-06
122
unytics/bigfunctions

Ускорьте BigQuery с помощью BigFunctions

unytics
⭐ 761 Python 👤 unytics User 🕐 Обновлено 2026-08-23 📅 Создано 2022-08-24
123
defog-ai/sql-eval

Оцените точность выходных данных, сгенерированных LLM

defog-ai
⭐ 744 Jupyter Notebook 👤 defog-ai Organization 🕐 Обновлено 2025-08-14 📅 Создано 2023-08-10
124
kennethleungty/Failed-ML

Подборка громких реальных примеров неудачных проектов машинного обучения

kennethleungty
⭐ 743 👤 kennethleungty User 🕐 Обновлено 2024-06-14 📅 Создано 2022-08-15
125
DataExpert-io/cumulative-table-design

Этот репозиторий помогает научить людей правильно определять и создавать накопительные таблицы!

DataExpert-io
⭐ 741 Python 👤 DataExpert-io Organization 🕐 Обновлено 2024-10-29 📅 Создано 2021-12-30
126
databricks/devrel

Этот репозиторий содержит записные книжки и презентации, которые мы используем для наших технических докладов Databricks "

databricks
⭐ 734 HTML 👤 databricks Organization 🕐 Обновлено 2025-01-06 📅 Создано 2020-04-03
127
awslabs/aws-glue-libs

Библиотеки AWS Glue — это дополнения и улучшения Spark для операций ETL.

awslabs
⭐ 701 Python 👤 awslabs Organization 🕐 Обновлено 2026-10-30 📅 Создано 2017-08-11
128
dgarnitz/vectorflow

VectorFlow — это конвейер встраивания векторов с высокой пропускной способностью, который принимает необработанные данные, преобразует их в векторы и записывает в выбранную вами базу данных векторов.

dgarnitz
⭐ 698 Python 👤 dgarnitz User 🕐 Обновлено 2024-05-16 📅 Создано 2023-07-25
129
risesoft-y9/DataFlow-Engine

Движок потока данных — это базовый движок на основе данных для интеграции данных, синхронизации данных, обмена данными, совместного использования данных, настройки задач и планирования задач. Движок потока данных использует такие архитектуры, как разделение управления и выполнения, многопоточные уровни и библиотеку плагинов, для решения реальных проблем данных, связанных с крупномасштабными задачами обработки данных, частыми отчетами о данных, частым сбором данных и совместимостью с гетерогенными данными.

risesoft-y9
⭐ 697 Java 👤 risesoft-y9 Organization 🕐 Обновлено 2026-11-12 📅 Создано 2024-08-26
130
petedannemann/gis-programming-roadmap

Магазин в одном месте для всех ваших нужд в GIS-программировании

petedannemann
⭐ 686 👤 petedannemann User 🕐 Обновлено 2024-01-02 📅 Создано 2019-01-11
131
kaushiksrini/parqeye

Загляните внутрь файлов Parquet прямо из вашего терминала

kaushiksrini
⭐ 682 Rust 👤 kaushiksrini User 🕐 Обновлено 2026-11-12 📅 Создано 2025-07-02
132
databricks/reference-apps

Справочные приложения Spark

databricks
⭐ 652 Scala 👤 databricks Organization 🕐 Обновлено 2024-10-03 📅 Создано 2014-08-19
133
JakobGM/patito

Слой моделирования данных, построенный поверх polars и pydantic

JakobGM
⭐ 643 Python 👤 JakobGM User 🕐 Обновлено 2026-05-08 📅 Создано 2023-06-21
134
rpbouman/huey

Аналитика данных и BI в браузере с использованием DuckDB-WASM. Конфиденциальность прежде всего: ваши данные остаются локально; сервер не требуется.

rpbouman
⭐ 639 JavaScript 👤 rpbouman User 🕐 Обновлено 2026-11-13 📅 Создано 2023-12-25
135
google/patents-public-data

Анализ патентов с использованием публичных наборов данных Google Patents в BigQuery

google
⭐ 637 Jupyter Notebook 👤 google Organization 🕐 Обновлено 2024-06-17 📅 Создано 2017-06-05
136
dbt-labs/dbt-mcp

Сервер MCP (Model Context Protocol) для взаимодействия с dbt.

dbt-labs
⭐ 624 Python 👤 dbt-labs Organization 🕐 Обновлено 2026-11-18 📅 Создано 2025-03-12
137
ConduitIO/conduit

Conduit передает данные между хранилищами данных. Замена Kafka Connect. JVM не требуется.

ConduitIO
⭐ 617 Go 👤 ConduitIO Organization 🕐 Обновлено 2026-11-21 📅 Создано 2022-01-11
138
synmetrix/synmetrix

Synmetrix – готовый к производству семантический слой с открытым исходным кодом на Cube

synmetrix
⭐ 616 JavaScript 👤 synmetrix Organization 🕐 Обновлено 2025-02-07 📅 Создано 2021-06-18
139
insitro/redun

Еще один избыточный движок рабочего процесса

insitro
⭐ 610 Python 👤 insitro Organization 🕐 Обновлено 2026-11-18 📅 Создано 2021-11-04
140
matsonj/nba-monte-carlo

Имитационное моделирование сезона НБА методом Монте-Карло с использованием dbt, duckdb и evidence.dev

matsonj
⭐ 609 Python 👤 matsonj User 🕐 Обновлено 2026-11-12 📅 Создано 2022-09-29
141
apecloud/myduckserver

Единые серверы MySQL, Postgres и FlightSQL на базе DuckDB.

apecloud
⭐ 595 Go 👤 apecloud Organization 🕐 Обновлено 2026-09-19 📅 Создано 2024-08-22
142
argilla-io/synthetic-data-generator

Создание наборов данных с использованием естественного языка

argilla-io
⭐ 590 Python 👤 argilla-io Organization 🕐 Обновлено 2025-09-19 📅 Создано 2024-11-21
143
singer-io/singer-python

Записывает формат Singer из Python

singer-io
⭐ 585 Python 👤 singer-io Organization 🕐 Обновлено 2026-11-02 📅 Создано 2016-10-28
144
taz4et/bitcoin-etl

Инструментарий Python для извлечения и преобразования данных блокчейна Биткойн в структурированные форматы.

taz4et
⭐ 580 Python 👤 taz4et User 🕐 Обновлено 2025-11-24 📅 Создано 2025-11-14
145
spark-examples/spark-scala-examples

Этот проект предоставляет примеры Apache Spark SQL, RDD, DataFrame и Dataset на языке Scala.

spark-examples
⭐ 567 Scala 👤 spark-examples Organization 🕐 Обновлено 2024-03-20 📅 Создано 2019-11-26
146
pracdata/awesome-open-source-data-engineering

Куратированный список инструментов с открытым исходным кодом, используемых в аналитических платформах и экосистеме инженерии данных

pracdata
⭐ 564 👤 pracdata Organization 🕐 Обновлено 2025-03-12 📅 Создано 2024-02-22
147
GoogleCloudPlatform/bigquery-oreilly-book

Сопутствующий исходный код: BigQuery: The Definitive Guide от Lakshmanan & Tigani, будет опубликован O'Reilly Media

GoogleCloudPlatform
⭐ 547 Jupyter Notebook 👤 GoogleCloudPlatform Organization 🕐 Обновлено 2024-05-02 📅 Создано 2018-11-26
148
kimtth/software-architect-mindmap

🧠 Ментальная карта 🗺️ архитектуры программного обеспечения и программной инженерии

kimtth
⭐ 543 Python 👤 kimtth User 🕐 Обновлено 2026-11-20 📅 Создано 2022-02-02
149
kvakvs/beam-wisdoms

Вики, содержащая фрагменты информации и знаний о виртуальной машине BEAM (которая запускает Erlang/OTP и другие языки на основе BEAM).

kvakvs
⭐ 539 👤 kvakvs User 🕐 Обновлено 2024-06-10 📅 Создано 2016-08-27
150
silver-dev-org/interview-ready

Репозиторий для тренировки к собеседованиям.

silver-dev-org
⭐ 529 TypeScript 👤 silver-dev-org Organization 🕐 Обновлено 2026-02-05 📅 Создано 2023-08-22