Git Stars Git Stars

#data-engineering Репозитории

152
Всего репозиториев
727,632
Всего звезд
4,787
Среднее количество звезд на репозиторий

Всего репозиториев: 152

51
apache/hamilton

Apache Hamilton помогает специалистам по данным и инженерам определять тестируемые, модульные, самодокументируемые потоки данных, которые кодируют происхождение/отслеживание и метаданные. Работает и масштабируется везде, где работает python.

apache
⭐ 2,631 Jupyter Notebook 👤 apache Organization 🕐 Обновлено 2026-11-16 📅 Создано 2023-02-23
52
sodadata/soda-core

Движок Data Contracts для современного стека данных. https://www.soda.io

sodadata
⭐ 2,463 Python 👤 sodadata Organization 🕐 Обновлено 2026-11-21 📅 Создано 2020-12-14
53
metarank/metarank

Сервис машинного обучения с низким уровнем кода для персонализированного ранжирования статей, листингов, результатов поиска, рекомендаций, который повышает вовлеченность пользователей. Дружелюбный движок Learn-to-Rank

metarank
⭐ 2,461 Scala 👤 metarank Organization 🕐 Обновлено 2026-10-06 📅 Создано 2020-08-19
54
running-elephant/datart

Datart — это открытая платформа визуализации данных нового поколения

running-elephant
⭐ 2,288 TypeScript 👤 running-elephant Organization 🕐 Обновлено 2025-02-10 📅 Создано 2021-10-15
55
bytewax/bytewax

Обработка потоков Python

bytewax
⭐ 2,074 Python 👤 bytewax Organization 🕐 Обновлено 2026-11-13 📅 Создано 2022-02-04
56
data-engineering-community/data-engineering-wiki

Лучшее место для изучения инженерии данных. Создано и поддерживается сообществом инженеров данных.

data-engineering-community
⭐ 2,067 CSS 👤 data-engineering-community Organization 🕐 Обновлено 2026-09-15 📅 Создано 2021-05-04
57
getnao/nao

👾 nao — решение № 1 в сфере агентской BI с открытым исходным кодом. (1) Создайте контекст с помощью nao-core CLI; (2) разверните чат-интерфейс nao для всех.

getnao
⭐ 2,034 TypeScript 👤 getnao Organization 🕐 Обновлено 2026-11-20 📅 Создано 2025-12-30
58
Datus-ai/Datus-agent

Будущее Data Engineering — CLI SQL-клиент для современной дата-стека, обеспечивающий AI-native контекстное проектирование для данных.

Datus-ai
⭐ 1,932 Python 👤 Datus-ai Organization 🕐 Обновлено 2026-11-20 📅 Создано 2025-07-04
59
feathr-ai/feathr

Feathr – Масштабируемая, унифицированная платформа для инжиниринга данных и искусственного интеллекта для корпораций

feathr-ai
⭐ 1,916 Scala 👤 feathr-ai Organization 🕐 Обновлено 2024-04-04 📅 Создано 2022-02-18
60
dbt-labs/dbt-utils

Утилитарные функции для проектов dbt.

dbt-labs
⭐ 1,837 Makefile 👤 dbt-labs Organization 🕐 Обновлено 2026-11-21 📅 Создано 2017-07-16
61
kiwenlau/hadoop-cluster-docker

Запуск Hadoop Cluster в контейнерах Docker

kiwenlau
⭐ 1,827 Shell 👤 kiwenlau User 🕐 Обновлено 2024-07-01 📅 Создано 2015-05-21
62
OBenner/data-engineering-interview-questions

Более 2000+ вопросов для собеседования инженера данных.

OBenner
⭐ 1,815 Python 👤 OBenner User 🕐 Обновлено 2026-01-13 📅 Создано 2021-08-08
63
Hiflylabs/awesome-dbt

Подборка отличных ресурсов по dbt

Hiflylabs
⭐ 1,754 👤 Hiflylabs Organization 🕐 Обновлено 2026-11-17 📅 Создано 2021-10-09
64
benthecoder/yt-channels-DS-AI-ML-CS

Полный список из более чем 180 YouTube-каналов, посвященных науке о данных, инженерии данных, машинному обучению, глубокому обучению, информатике, программированию, разработке программного обеспечения и т. д.

benthecoder
⭐ 1,732 👤 benthecoder User 🕐 Обновлено 2026-07-19 📅 Создано 2021-06-14
65
DataWithBaraa/sql-ultimate-course

Материалы бесплатного 30-часового курса по SQL: базы данных для SQL Server, MySQL и PostgreSQL, все запросы из 41 главы и слайды.

DataWithBaraa
⭐ 1,711 TSQL 👤 DataWithBaraa User 🕐 Обновлено 2026-11-06 📅 Создано 2025-03-18
66
mlrun/mlrun

MLRun — это открытая платформа MLOps для быстрого создания и управления непрерывными приложениями ML на протяжении всего их жизненного цикла. MLRun интегрируется в вашу среду разработки и CI/CD и автоматизирует доставку производственных данных, конвейеров ML и онлайн-приложений.

mlrun
⭐ 1,703 Python 👤 mlrun Organization 🕐 Обновлено 2026-11-20 📅 Создано 2019-09-01
67
Multiwoven/multiwoven

🔥🔥🔥 Open source Reverse ETL - альтернатива hightouch и census.

Multiwoven
⭐ 1,685 Ruby 👤 Multiwoven Organization 🕐 Обновлено 2026-11-18 📅 Создано 2023-10-20
68
Kaelio/ktx

ktx — это исполняемый контекстный слой для агентов данных и аналитики 🐙 Позвольте Claude Code, Codex или другим ИИ-агентам точно запрашивать аналитические базы данных с полным контекстом вашей компании

Kaelio
⭐ 1,633 TypeScript 👤 Kaelio Organization 🕐 Обновлено 2026-11-18 📅 Создано 2026-05-10
69
kantord/just-dashboard

:bar_chart: :clipboard: Панели управления с использованием файлов YAML или JSON

kantord
⭐ 1,587 TypeScript 👤 kantord User 🕐 Обновлено 2026-02-21 📅 Создано 2018-01-18
70
quixio/quix-streams

Потоковые DataFrame Python для Kafka

quixio
⭐ 1,582 Python 👤 quixio Organization 🕐 Обновлено 2026-11-18 📅 Создано 2022-11-17
71
JeffSackmann/tennis_atp

Рейтинги, результаты и статистика ATP по теннису

JeffSackmann
⭐ 1,577 👤 JeffSackmann User 🕐 Обновлено 2026-06-08 📅 Создано 2015-03-13
72
chenditc/investment_data

Скрипты и документация для https://www.dolthub.com/repositories/chenditc/investment_data

chenditc
⭐ 1,571 Python 👤 chenditc User 🕐 Обновлено 2026-11-20 📅 Создано 2022-07-19
73
slothflowlabs/duckle

ETL/ELT с открытым исходным кодом, который можно развернуть на собственных серверах или в облаке. Построен на DuckDB: визуальные конвейеры без кода или с минимальным кодом либо SQL, 446 компонентов, dbt, CDC, контроль качества данных, обратный ETL, происхождение данных и MCP для ИИ-агентов. Без облака поставщика и без оплаты за каждую строку.

slothflowlabs
⭐ 1,558 Rust 👤 slothflowlabs Organization 🕐 Обновлено 2026-11-20 📅 Создано 2026-05-21
74
duneanalytics/spellbook

SQL-представления для Dune

duneanalytics
⭐ 1,529 Python 👤 duneanalytics Organization 🕐 Обновлено 2026-11-21 📅 Создано 2020-01-31
75
pyper-dev/pyper

Параллельный Python — это просто

pyper-dev
⭐ 1,521 Python 👤 pyper-dev User 🕐 Обновлено 2025-02-04 📅 Создано 2024-05-22
76
pyjanitor-devs/pyjanitor

Чистые API для очистки данных. Реализация на Python пакета R Janitor

pyjanitor-devs
⭐ 1,500 Python 👤 pyjanitor-devs Organization 🕐 Обновлено 2026-11-20 📅 Создано 2018-03-04
77
ashishps1/awesome-engineering-articles

Куратированная коллекция из более 300 статей из инженерных блогов ведущих технологических компаний. Узнайте, как лучшие инженерные команды решают реальные проблемы в масштабе.

ashishps1
⭐ 1,491 👤 ashishps1 User 🕐 Обновлено 2026-03-01 📅 Создано 2026-02-15
78
lvgalvao/data-engineering-roadmap

Профессиональное обучение по инженерии данных и ИИ

lvgalvao
⭐ 1,451 Python 👤 lvgalvao User 🕐 Обновлено 2026-05-12 📅 Создано 2024-01-16
79
opendatadiscovery/odd-platform

Первая платформа с открытым исходным кодом для обнаружения и наблюдаемости данных. Мы облегчаем жизнь специалистам по данным, чтобы вы могли сосредоточиться на своем бизнесе.

opendatadiscovery
⭐ 1,441 Java 👤 opendatadiscovery Organization 🕐 Обновлено 2026-10-19 📅 Создано 2021-07-07
80
GoogleCloudPlatform/data-science-on-gcp

Исходный код, сопровождающий книгу: Наука о данных на платформе Google Cloud, Valliappa Lakshmanan, O'Reilly 2017

GoogleCloudPlatform
⭐ 1,432 Jupyter Notebook 👤 GoogleCloudPlatform Organization 🕐 Обновлено 2026-02-20 📅 Создано 2017-02-10
81
zapret-info/z-i

Реестр отфильтрованных в Российской Федерации интернет-адресов

zapret-info
⭐ 1,388 👤 zapret-info User 🕐 Обновлено 2025-10-01 📅 Создано 2012-11-19
82
quiltdata/quilt

Quilt — это платформа управления научными данными на AWS, которая помогает командам и ИИ находить, доверять и повторно использовать данные с помощью глубоко версионированных, богатых контекстом пакетов данных.

quiltdata
⭐ 1,373 TypeScript 👤 quiltdata Organization 🕐 Обновлено 2026-11-21 📅 Создано 2017-02-10
83
spark-examples/pyspark-examples

Примеры PySpark RDD, DataFrame и Dataset на языке Python

spark-examples
⭐ 1,371 Python 👤 spark-examples Organization 🕐 Обновлено 2025-12-07 📅 Создано 2019-11-26
84
gtoonstra/etl-with-airflow

Лучшие практики ETL с Airflow, с примерами

gtoonstra
⭐ 1,353 Shell 👤 gtoonstra User 🕐 Обновлено 2024-09-25 📅 Создано 2016-10-16
85
Sniper970119/dianping_spider

Dianping Crawler (можно сканировать весь сайт, решает проблему шифрования динамических шрифтов, без OCR). Постоянное обновление

Sniper970119
⭐ 1,329 Python 👤 Sniper970119 User 🕐 Обновлено 2026-11-03 📅 Создано 2021-01-22
86
Data-Learn/data-engineering

Начало работы с инженерией данных

Data-Learn
⭐ 1,323 Python 👤 Data-Learn Organization 🕐 Обновлено 2025-04-20 📅 Создано 2020-05-14
87
bitol-io/open-data-contract-standard

Дом стандарта контрактов открытых данных (ODCS).

bitol-io
⭐ 1,238 Shell 👤 bitol-io Organization 🕐 Обновлено 2026-11-17 📅 Создано 2023-06-27
88
abhishek-ch/around-dataengineering

Центр знаний по инжинирингу данных и машинному обучению

abhishek-ch
⭐ 1,140 Python 👤 abhishek-ch User 🕐 Обновлено 2024-02-02 📅 Создано 2020-09-18
89
daochenzha/data-centric-AI

Курированный, но неполный список ресурсов по ориентированному на данные ИИ.

daochenzha
⭐ 1,138 👤 daochenzha User 🕐 Обновлено 2024-06-26 📅 Создано 2023-03-07
90
datacontract/datacontract-cli

Тестирование контрактов данных с открытым исходным кодом для Snowflake, Databricks, BigQuery, Kafka и ещё 15 платформ. Создано на основе Open Data Contract Standard (ODCS). Лицензия MIT.

datacontract
⭐ 1,114 JavaScript 👤 datacontract Organization 🕐 Обновлено 2026-11-18 📅 Создано 2023-07-24
91
youngwookim/awesome-hadoop

Подборка удивительно превосходных ресурсов по Hadoop и экосистеме Hadoop

youngwookim
⭐ 1,113 👤 youngwookim User 🕐 Обновлено 2024-05-07 📅 Создано 2014-07-08
92
DataWithBaraa/sql-data-warehouse-project

Создайте хранилище данных в SQL Server на основе двух исходных систем — CRM и ERP — с использованием слоёв bronze, silver и gold. Файлы и скрипты полного бесплатного проекта.

DataWithBaraa
⭐ 1,089 TSQL 👤 DataWithBaraa User 🕐 Обновлено 2026-11-06 📅 Создано 2024-12-30
93
JohnSnowLabs/spark-nlp-workshop

Публичные исполняемые примеры использования NLP от John Snow Labs для Apache Spark.

JohnSnowLabs
⭐ 1,089 Jupyter Notebook 👤 JohnSnowLabs Organization 🕐 Обновлено 2026-11-17 📅 Создано 2018-08-20
94
mattm/sql-style-guide

Субъективное руководство по написанию чистого и поддерживаемого SQL.

mattm
⭐ 1,088 👤 mattm User 🕐 Обновлено 2025-01-14 📅 Создано 2019-03-27
95
nijikokun/generate-schema

🧞 Преобразуйте объекты JSON в MySQL, JSON Schema, Mongoose, Google BigQuery, Swagger и многое другое.

nijikokun
⭐ 1,067 JavaScript 👤 nijikokun User 🕐 Обновлено 2024-01-30 📅 Создано 2015-02-16
96
opendatadiscovery/awesome-data-catalogs

📙 Потрясающие каталоги данных и платформы наблюдаемости.

opendatadiscovery
⭐ 1,059 👤 opendatadiscovery Organization 🕐 Обновлено 2025-08-14 📅 Создано 2021-07-14
97
DataTalksClub/stock-markets-analytics-zoomcamp

Учебные материалы для Zoomcamp по аналитике на фондовых рынках

DataTalksClub
⭐ 1,052 Jupyter Notebook 👤 DataTalksClub Organization 🕐 Обновлено 2026-10-30 📅 Создано 2024-02-14
99
dataform-co/dataform

Dataform — это фреймворк для управления операциями с данными на основе SQL в BigQuery.

dataform-co
⭐ 998 TypeScript 👤 dataform-co Organization 🕐 Обновлено 2026-11-20 📅 Создано 2018-09-03
100
estuary/flow

🌊 Непрерывно синхронизируйте системы, в которых находятся ваши данные, с системами, в которых вы _хотите_ их видеть, управляя потоками данных с помощью Estuary. 🌊

estuary
⭐ 995 Rust 👤 estuary Organization 🕐 Обновлено 2026-11-21 📅 Создано 2020-02-13