Git Stars Git Stars

#spark Репозитории

126
Всего репозиториев
513,269
Всего звезд
4,073
Среднее количество звезд на репозиторий

Всего репозиториев: 126

51
elastic/elasticsearch-hadoop

:elephant: Elasticsearch в режиме реального времени для поиска и анализа, интегрированный с Hadoop

elastic
⭐ 1,966 Java 👤 elastic Organization 🕐 Обновлено 2026-11-21 📅 Создано 2013-03-11
52
apache/cassandra-spark-connector

Соединитель Apache Spark к Apache Cassandra

apache
⭐ 1,948 Scala 👤 apache Organization 🕐 Обновлено 2025-04-29 📅 Создано 2014-06-27
53
apache/auron

Apache Auron — это ускоритель для движков обработки больших данных, использующий нативное векторизованное выполнение для ускорения обработки запросов.

apache
⭐ 1,849 Rust 👤 apache Organization 🕐 Обновлено 2026-11-20 📅 Создано 2021-06-28
54
collabH/bigdata-growth

Репозиторий знаний больших данных включает моделирование хранилищ данных, обработку данных в реальном времени, большие данные, централизованную платформу данных, проектирование систем, Java, алгоритмы и т. д.

collabH
⭐ 1,838 Python 👤 collabH User 🕐 Обновлено 2026-04-18 📅 Создано 2020-06-10
55
OBenner/data-engineering-interview-questions

Более 2000+ вопросов для собеседования инженера данных.

OBenner
⭐ 1,815 Python 👤 OBenner User 🕐 Обновлено 2026-01-13 📅 Создано 2021-08-08
56
zhonghuasheng/Tutorial

Сводка системы архитектуры знаний полнофункционального стека backend (Java Golang)

zhonghuasheng
⭐ 1,756 Shell 👤 zhonghuasheng User 🕐 Обновлено 2025-07-20 📅 Создано 2016-01-23
57
apachecn/.github

ApacheCN Открытая организация: Объявления, Введение, Участники, Активности, Способы обмена

apachecn
⭐ 1,750 CSS 👤 apachecn Organization 🕐 Обновлено 2026-11-02 📅 Создано 2018-07-19
58
strapdata/elassandra

Elassandra = Elasticsearch + Apache Cassandra

strapdata
⭐ 1,718 Java 👤 strapdata Organization 🕐 Обновлено 2026-05-17 📅 Создано 2015-08-22
59
jadianes/spark-py-notebooks

Учебные пособия по Apache Spark & Python (pySpark) для анализа больших данных и машинного обучения в виде IPython / Jupyter блокнотов

jadianes
⭐ 1,667 Jupyter Notebook 👤 jadianes User 🕐 Обновлено 2024-03-16 📅 Создано 2015-05-06
60
almond-sh/almond

Ядро Scala для Jupyter

almond-sh
⭐ 1,631 Scala 👤 almond-sh Organization 🕐 Обновлено 2026-11-19 📅 Создано 2015-03-10
61
japila-books/apache-spark-internals

Внутренние механизмы Apache Spark

japila-books
⭐ 1,553 👤 japila-books Organization 🕐 Обновлено 2026-10-10 📅 Создано 2015-08-31
62
combust/mleap

MLeap: Развертывание ML-пайплайнов в продакшен

combust
⭐ 1,544 Scala 👤 combust Organization 🕐 Обновлено 2026-11-09 📅 Создано 2016-08-23
63
hi-primus/optimus

:truck: Гибкие рабочие процессы подготовки данных, упрощенные с помощью Pandas, Dask, cuDF, Dask-cuDF, Vaex и PySpark

hi-primus
⭐ 1,539 Python 👤 hi-primus Organization 🕐 Обновлено 2024-12-02 📅 Создано 2017-07-13
64
projectnessie/nessie

Nessie: Транзакционный каталог для озер данных с семантикой, похожей на Git

projectnessie
⭐ 1,533 Java 👤 projectnessie Organization 🕐 Обновлено 2026-11-21 📅 Создано 2020-04-09
65
apache/carbondata

Высокопроизводительное решение для хранения данных

apache
⭐ 1,452 Scala 👤 apache Organization 🕐 Обновлено 2026-10-02 📅 Создано 2016-06-28
66
databricks/LearningSparkV2

Это репозиторий GitHub для Learning Spark: Lightning-Fast Data Analytics [2nd Edition]

databricks
⭐ 1,396 Scala 👤 databricks Organization 🕐 Обновлено 2025-01-28 📅 Создано 2019-02-10
67
HariSekhon/Dockerfiles

50+ публичные образы DockerHub для Docker & Kubernetes - DevOps, CI/CD, GitHub Actions, CircleCI, Jenkins, TeamCity, Alpine, CentOS, Debian, Fedora, Ubuntu, Hadoop, Kafka, ZooKeeper, HBase, Cassandra, Solr, SolrCloud, Presto, Apache Drill, Nifi, Spark, Consul, Riak

HariSekhon
⭐ 1,382 Shell 👤 HariSekhon User 🕐 Обновлено 2026-02-03 📅 Создано 2016-01-17
68
jupyter-incubator/sparkmagic

Магические команды и ядра Jupyter для работы с удалёнными кластерами Spark

jupyter-incubator
⭐ 1,368 Python 👤 jupyter-incubator Organization 🕐 Обновлено 2026-11-20 📅 Создано 2015-09-21
69
apache/datafusion-comet

Apache DataFusion Comet Spark Accelerator

apache
⭐ 1,326 Scala 👤 apache Organization 🕐 Обновлено 2026-11-21 📅 Создано 2024-01-15
70
iflytek/datasophon

Эксперт нового поколения по управлению большими данными в облачной среде нацелен на то, чтобы помочь пользователям быстро создавать стабильные, эффективные и масштабируемые облачные платформы для работы с большими данными.

iflytek
⭐ 1,325 Java 👤 iflytek Organization 🕐 Обновлено 2025-07-22 📅 Создано 2022-10-11
71
DTStack/Taier

Taier — это платформа разработки больших данных для подачи, планирования, эксплуатации и обслуживания, а также отображения информации об индикаторах

DTStack
⭐ 1,285 Java 👤 DTStack Organization 🕐 Обновлено 2026-11-05 📅 Создано 2021-03-02
72
mahmoudparsian/pyspark-tutorial

PySpark-Tutorial предоставляет базовые алгоритмы с использованием PySpark

mahmoudparsian
⭐ 1,276 Jupyter Notebook 👤 mahmoudparsian User 🕐 Обновлено 2025-05-26 📅 Создано 2015-03-12
73
zinggAI/zingg

Разрешение сущностей и идентификаторов, управление мастер-данными и дедупликация на основе ИИ в масштабах для людей и агентов

zinggAI
⭐ 1,275 Java 👤 zinggAI Organization 🕐 Обновлено 2026-11-03 📅 Создано 2021-08-25
74
graphframes/graphframes

GraphFrames — это пакет для Apache Spark, который предоставляет графы на основе DataFrame.

graphframes
⭐ 1,213 Scala 👤 graphframes Organization 🕐 Обновлено 2026-11-12 📅 Создано 2016-01-20
75
apache/amoro

Apache Amoro (incubating) — это система управления Lakehouse, построенная на открытых форматах озер данных.

apache
⭐ 1,207 Java 👤 apache Organization 🕐 Обновлено 2026-11-20 📅 Создано 2022-07-14
76
abhishek-ch/around-dataengineering

Центр знаний по инжинирингу данных и машинному обучению

abhishek-ch
⭐ 1,140 Python 👤 abhishek-ch User 🕐 Обновлено 2024-02-02 📅 Создано 2020-09-18
77
apache/celeborn

Apache Celeborn — это эластичный высокопроизводительный сервис для данных перемешивания и выгрузки.

apache
⭐ 1,081 Java 👤 apache Organization 🕐 Обновлено 2026-11-20 📅 Создано 2021-12-10
78
metabrainz/listenbrainz-server

Сервер для проекта ListenBrainz, включая фронтенд-код (javascript/react), который он обслуживает, и все компоненты обработки данных, используемые LB.

metabrainz
⭐ 1,074 Python 👤 metabrainz Organization 🕐 Обновлено 2026-11-21 📅 Создано 2015-09-05
79
bigdatagenomics/adam

ADAM — это платформа для геномного анализа со специализированными форматами файлов, разработанными с использованием Apache Avro, Apache Spark и Apache Parquet. Лицензия Apache 2.

bigdatagenomics
⭐ 1,060 Scala 👤 bigdatagenomics Organization 🕐 Обновлено 2026-03-17 📅 Создано 2013-11-19
80
NVIDIA/cudf-spark

Плагин NVIDIA cuDF для Apache Spark — ускорение Apache Spark с помощью графических процессоров

NVIDIA
⭐ 1,021 Scala 👤 NVIDIA Organization 🕐 Обновлено 2026-11-21 📅 Создано 2020-05-14
81
deanwampler/spark-scala-tutorial

Бесплатное руководство по Apache Spark.

deanwampler
⭐ 988 Jupyter Notebook 👤 deanwampler User 🕐 Обновлено 2026-01-05 📅 Создано 2014-05-01
82
h2oai/sparkling-water

Sparkling Water обеспечивает функциональность H2O внутри кластера Spark

h2oai
⭐ 982 Scala 👤 h2oai Organization 🕐 Обновлено 2025-11-05 📅 Создано 2014-10-13
83
sparklyr/sparklyr

Интерфейс R для Apache Spark

sparklyr
⭐ 970 R 👤 sparklyr Organization 🕐 Обновлено 2026-11-09 📅 Создано 2016-05-20
84
data-prep-kit/data-prep-kit

Проект с открытым исходным кодом для подготовки данных для приложений GenAI

data-prep-kit
⭐ 968 HTML 👤 data-prep-kit Organization 🕐 Обновлено 2026-09-29 📅 Создано 2024-04-08
85
delta-io/delta-sharing

Открытый протокол для безопасного обмена данными

delta-io
⭐ 965 Scala 👤 delta-io Organization 🕐 Обновлено 2026-11-21 📅 Создано 2021-04-08
86
apache/livy

Apache Livy — это открытый REST-интерфейс для взаимодействия с Apache Spark откуда угодно.

apache
⭐ 962 Scala 👤 apache Organization 🕐 Обновлено 2026-10-20 📅 Создано 2017-06-25
87
microsoft/Mobius

Привязки языков C# и F# и расширения для Apache Spark

microsoft
⭐ 948 C# 👤 microsoft Organization 🕐 Обновлено 2025-12-11 📅 Создано 2015-10-27
88
RedisLabs/spark-redis

Коннектор для Spark, который позволяет читать и записывать в/из кластера Redis

RedisLabs
⭐ 944 Scala 👤 RedisLabs Organization 🕐 Обновлено 2026-10-12 📅 Создано 2015-08-16
89
XHToken/Spark-X2.6

Серия открытых моделей Spark-x2.6. Расширяя границы агентных возможностей моделей на устройстве

XHToken
⭐ 927 👤 XHToken Organization 🕐 Обновлено 2026-11-04 📅 Создано 2026-08-24
90
typelevel/frameless

Выразительные типы для Spark.

typelevel
⭐ 898 Scala 👤 typelevel Organization 🕐 Обновлено 2026-10-28 📅 Создано 2015-03-28
91
pingcap/tispark

TiSpark предназначен для запуска Apache Spark поверх TiDB/TiKV.

pingcap
⭐ 889 Scala 👤 pingcap Organization 🕐 Обновлено 2026-08-20 📅 Создано 2017-05-02
92
ohenley/awesome-ada

Куратированный список отличных ресурсов, связанных с языком программирования Ada и SPARK

ohenley
⭐ 881 👤 ohenley User 🕐 Обновлено 2026-11-14 📅 Создано 2018-10-24
93
awslabs/data-on-eks

DoEKS — это инструмент для создания, развертывания и масштабирования платформ данных на Amazon EKS

awslabs
⭐ 863 Shell 👤 awslabs Organization 🕐 Обновлено 2026-11-21 📅 Создано 2022-09-25
94
LucaCanali/sparkMeasure

Этот репозиторий содержит исходный код разработки sparkMeasure — библиотеки для анализа производительности и устранения неисправностей Apache Spark. Она упрощает сбор, агрегацию и экспорт метрик задач/этапов Spark и предназначена для практического использования разработчиками и инженерами данных в интерактивном анализе, тестировании и рабочих процессах мониторинга производства.

LucaCanali
⭐ 831 Scala 👤 LucaCanali User 🕐 Обновлено 2026-10-16 📅 Создано 2017-03-16
95
HariSekhon/DevOps-Python-tools

80+ инструментов CLI DevOps и данных - AWS, GCP, GCF Python Cloud Functions, Log Anonymizer, Spark, Hadoop, HBase, Hive, Impala, Linux, Docker, Конвертеры и валидаторы данных Spark (Avro/Parquet/JSON/CSV/INI/XML/YAML), Travis CI, AWS CloudFormation, Elasticsearch, Solr и т.д.

HariSekhon
⭐ 824 Python 👤 HariSekhon User 🕐 Обновлено 2026-02-03 📅 Создано 2015-10-27
96
WeBankFinTech/Scriptis

Scriptis предназначен для интерактивного анализа данных с разработкой скриптов (SQL, PySpark, HiveQL), отправкой задач (Spark, Hive), UDF, функциями, управлением ресурсами и интеллектуальной диагностикой.

WeBankFinTech
⭐ 812 Vue 👤 WeBankFinTech Organization 🕐 Обновлено 2024-12-11 📅 Создано 2019-07-23
98
cdapio/cdap

Фреймворк с открытым исходным кодом для создания приложений для анализа данных.

cdapio
⭐ 791 Java 👤 cdapio Organization 🕐 Обновлено 2026-11-21 📅 Создано 2014-08-02
99
a616567126/GPT-WEB-JAVA

ИИ-чат-бот на базе JDK8! Официальный аккаунт WeChat Midjourney Graphics, обмен ключей, поддержка веб-сайта ChatGPT, Midjourney Graphics, SD Graphics, обмен ключей, YiPay, привлечение трафика из официального аккаунта, регистрация по электронной почте🔥

a616567126
⭐ 774 Java 👤 a616567126 User 🕐 Обновлено 2026-11-18 📅 Создано 2023-03-28
100
MigoXLab/dingo

Dingo: Комплексный инструмент для оценки качества данных, моделей и приложений ИИ

MigoXLab
⭐ 771 Python 👤 MigoXLab Organization 🕐 Обновлено 2026-11-19 📅 Создано 2024-12-24