Git Stars Git Stars

#apache-spark Репозитории

Откройте для себя 44 активных репозиториев с открытым исходным кодом на GitHub, отмеченных тегом #apache-spark, с общим числом 97,788 звёзд (в среднем 2,222 на проект). Лидером этой темы является mlflow/mlflow, набравший 28,920 звёзд.

44
Всего репозиториев
97,788
Всего звезд
2,222
Среднее количество звезд на репозиторий

Всего репозиториев: 44

1
mlflow/mlflow

Открытая платформа для инженерной разработки ИИ для агентов, LLM и моделей ML. MLflow позволяет командам любого размера отлаживать, оценивать, мониторить и оптимизировать приложения ИИ производственного качества, контролируя затраты и управляя доступом к моделям и данным.

mlflow
⭐ 28,920 Python 👤 mlflow Organization 🕐 Обновлено 2026-11-21 📅 Создано 2018-06-05
2
treeverse/lakeFS

lakeFS - Контроль версий данных для вашего озера данных | Git для данных

treeverse
⭐ 5,590 Go 👤 treeverse Organization 🕐 Обновлено 2026-11-19 📅 Создано 2019-09-12
3
JerryLead/SparkInternals

Заметки о дизайне и реализации Apache Spark

JerryLead
⭐ 5,353 👤 JerryLead User 🕐 Обновлено 2024-04-02 📅 Создано 2014-08-08
4
microsoft/SynapseML

Простая и распределенная библиотека машинного обучения на Python для переноса алгоритмов ML в Spark

microsoft
⭐ 5,257 Scala 👤 microsoft Organization 🕐 Обновлено 2026-11-18 📅 Создано 2017-06-05
5
databricks/learning-spark

Пример кода из книги Learning Spark

databricks
⭐ 3,895 Java 👤 databricks Organization 🕐 Обновлено 2026-06-30 📅 Создано 2014-06-16
6
lakehq/sail

Полностью совместимая замена Apache Spark, написанная на Rust, объединяющая пакетную обработку, потоковую обработку и вычислительно интенсивные AI-нагрузки.

lakehq
⭐ 3,504 Rust 👤 lakehq Organization 🕐 Обновлено 2026-11-21 📅 Создано 2023-12-21
7
kubeflow/spark-operator

Оператор Kubernetes для управления жизненным циклом приложений Apache Spark на Kubernetes.

kubeflow
⭐ 3,162 Python 👤 kubeflow Organization 🕐 Обновлено 2026-11-20 📅 Создано 2018-01-03
8
intel/BigDL

BigDL: Распределённый TensorFlow, Keras и PyTorch на Apache Spark/Flink & Ray

intel
⭐ 2,699 Jupyter Notebook 👤 intel Organization 🕐 Обновлено 2026-06-12 📅 Создано 2017-05-05
9
dotnet/spark

.NET for Apache® Spark™ делает Apache Spark™ легкодоступным для разработчиков .NET.

dotnet
⭐ 2,096 C# 👤 dotnet Organization 🕐 Обновлено 2026-11-05 📅 Создано 2019-04-22
10
big-data-europe/docker-spark

Образ Docker Apache Spark

big-data-europe
⭐ 2,045 Shell 👤 big-data-europe Organization 🕐 Обновлено 2026-04-20 📅 Создано 2015-10-08
11
feathr-ai/feathr

Feathr – Масштабируемая, унифицированная платформа для инжиниринга данных и искусственного интеллекта для корпораций

feathr-ai
⭐ 1,916 Scala 👤 feathr-ai Organization 🕐 Обновлено 2024-04-04 📅 Создано 2022-02-18
12
awesome-spark/awesome-spark

Курируемый список отличных пакетов и ресурсов Apache Spark.

awesome-spark
⭐ 1,903 Shell 👤 awesome-spark Organization 🕐 Обновлено 2026-02-27 📅 Создано 2016-02-01
13
holdenk/spark-testing-base

Базовые классы для использования при написании тестов с Spark

holdenk
⭐ 1,555 Scala 👤 holdenk User 🕐 Обновлено 2026-10-31 📅 Создано 2015-01-30
14
japila-books/apache-spark-internals

Внутренние механизмы Apache Spark

japila-books
⭐ 1,553 👤 japila-books Organization 🕐 Обновлено 2026-10-10 📅 Создано 2015-08-31
15
aws-samples/aws-glue-samples

Примеры кода AWS Glue

aws-samples
⭐ 1,538 Python 👤 aws-samples Organization 🕐 Обновлено 2026-11-16 📅 Создано 2017-05-21
16
sryza/aas

Код, сопровождающий книгу "Advanced Analytics with Spark" от O'Reilly Media

sryza
⭐ 1,531 Scala 👤 sryza User 🕐 Обновлено 2024-09-25 📅 Создано 2014-11-08
17
locationtech/geomesa

GeoMesa — это набор инструментов для распределенной работы с большими геопространственными данными.

locationtech
⭐ 1,499 Scala 👤 locationtech Organization 🕐 Обновлено 2026-11-20 📅 Создано 2013-09-30
19
databricks/LearningSparkV2

Это репозиторий GitHub для Learning Spark: Lightning-Fast Data Analytics [2nd Edition]

databricks
⭐ 1,396 Scala 👤 databricks Organization 🕐 Обновлено 2025-01-28 📅 Создано 2019-02-10
20
spark-examples/pyspark-examples

Примеры PySpark RDD, DataFrame и Dataset на языке Python

spark-examples
⭐ 1,371 Python 👤 spark-examples Organization 🕐 Обновлено 2025-12-07 📅 Создано 2019-11-26
21
graphframes/graphframes

GraphFrames — это пакет для Apache Spark, который предоставляет графы на основе DataFrame.

graphframes
⭐ 1,213 Scala 👤 graphframes Organization 🕐 Обновлено 2026-11-12 📅 Создано 2016-01-20
22
youngwookim/awesome-hadoop

Подборка удивительно превосходных ресурсов по Hadoop и экосистеме Hadoop

youngwookim
⭐ 1,113 👤 youngwookim User 🕐 Обновлено 2024-05-07 📅 Создано 2014-07-08
23
JohnSnowLabs/spark-nlp-workshop

Публичные исполняемые примеры использования NLP от John Snow Labs для Apache Spark.

JohnSnowLabs
⭐ 1,089 Jupyter Notebook 👤 JohnSnowLabs Organization 🕐 Обновлено 2026-11-17 📅 Создано 2018-08-20
24
mahmoudparsian/data-algorithms-book

Книга "MapReduce, Spark, Java и Scala для алгоритмов обработки данных"

mahmoudparsian
⭐ 1,083 Java 👤 mahmoudparsian User 🕐 Обновлено 2024-10-14 📅 Создано 2014-08-06
26
sparklyr/sparklyr

Интерфейс R для Apache Spark

sparklyr
⭐ 970 R 👤 sparklyr Organization 🕐 Обновлено 2026-11-09 📅 Создано 2016-05-20
27
dbpedia/extraction-framework

Программное обеспечение, используемое для извлечения структурированных данных из Википедии

dbpedia
⭐ 950 Scala 👤 dbpedia Organization 🕐 Обновлено 2026-11-13 📅 Создано 2013-02-07
28
microsoft/Mobius

Привязки языков C# и F# и расширения для Apache Spark

microsoft
⭐ 948 C# 👤 microsoft Organization 🕐 Обновлено 2025-12-11 📅 Создано 2015-10-27
29
aloneguid/parquet-dotnet

Полностью управляемая реализация Apache Parquet

aloneguid
⭐ 912 C# 👤 aloneguid User 🕐 Обновлено 2026-10-26 📅 Создано 2019-12-12
30
pyspark-ai/pyspark-ai

Английский SDK для Apache Spark

pyspark-ai
⭐ 879 Python 👤 pyspark-ai Organization 🕐 Обновлено 2026-10-27 📅 Создано 2023-04-27
31
LucaCanali/sparkMeasure

Этот репозиторий содержит исходный код разработки sparkMeasure — библиотеки для анализа производительности и устранения неисправностей Apache Spark. Она упрощает сбор, агрегацию и экспорт метрик задач/этапов Spark и предназначена для практического использования разработчиками и инженерами данных в интерактивном анализе, тестировании и рабочих процессах мониторинга производства.

LucaCanali
⭐ 831 Scala 👤 LucaCanali User 🕐 Обновлено 2026-10-16 📅 Создано 2017-03-16
32
awslabs/python-deequ

Python API для Deequ

awslabs
⭐ 826 Jupyter Notebook 👤 awslabs Organization 🕐 Обновлено 2026-10-24 📅 Создано 2020-11-09
33
databricks/tensorframes

[УСТАРЕЛО] Обертка Tensorflow для DataFrames на Apache Spark

databricks
⭐ 745 Scala 👤 databricks Organization 🕐 Обновлено 2024-07-30 📅 Создано 2016-03-04
34
databricks/devrel

Этот репозиторий содержит записные книжки и презентации, которые мы используем для наших технических докладов Databricks "

databricks
⭐ 734 HTML 👤 databricks Organization 🕐 Обновлено 2025-01-06 📅 Создано 2020-04-03
35
muaimingjun/bigData

Библиотека проектов соревнований по большим данным

muaimingjun
⭐ 734 Python 👤 muaimingjun User 🕐 Обновлено 2025-05-07 📅 Создано 2019-10-14
36
awslabs/aws-glue-libs

Библиотеки AWS Glue — это дополнения и улучшения Spark для операций ETL.

awslabs
⭐ 701 Python 👤 awslabs Organization 🕐 Обновлено 2026-10-30 📅 Создано 2017-08-11
37
mrpowers-io/quinn

Методы PySpark для повышения продуктивности разработчиков 📣 👯 🎉

mrpowers-io
⭐ 691 Python 👤 mrpowers-io Organization 🕐 Обновлено 2026-10-25 📅 Создано 2017-09-15
38
databricks/reference-apps

Справочные приложения Spark

databricks
⭐ 652 Scala 👤 databricks Organization 🕐 Обновлено 2024-10-03 📅 Создано 2014-08-19
39
nchammas/flintrock

Инструмент командной строки для запуска кластеров Apache Spark.

nchammas
⭐ 651 Python 👤 nchammas User 🕐 Обновлено 2024-12-13 📅 Создано 2015-06-04
40
infoslack/awesome-kafka

Список об Apache Kafka

infoslack
⭐ 595 👤 infoslack User 🕐 Обновлено 2026-05-05 📅 Создано 2016-04-29
41
openscoring/openscoring

REST веб-сервис для истинной оценки в реальном времени (<1 мс) моделей Scikit-Learn, R и Apache Spark

openscoring
⭐ 587 Java 👤 openscoring Organization 🕐 Обновлено 2026-02-02 📅 Создано 2013-04-02
42
spark-examples/spark-scala-examples

Этот проект предоставляет примеры Apache Spark SQL, RDD, DataFrame и Dataset на языке Scala.

spark-examples
⭐ 567 Scala 👤 spark-examples Organization 🕐 Обновлено 2024-03-20 📅 Создано 2019-11-26
43
cas-bigdatalab/piflow

πflow — это движок потоков больших данных с поддержкой Spark

cas-bigdatalab
⭐ 541 Python 👤 cas-bigdatalab Organization 🕐 Обновлено 2026-11-20 📅 Создано 2018-05-03
44
LearningJournal/Spark-Programming-In-Python

Apache Spark 3 - Программирование на Python в Spark для начинающих

LearningJournal
⭐ 510 Python 👤 LearningJournal User 🕐 Обновлено 2024-07-25 📅 Создано 2020-05-31

Часто задаваемые вопросы

1

Какой репозиторий по теме #apache-spark наиболее популярен на GitHub?

Самый высоко оценённый проект с открытым исходным кодом по теме #apache-spark на GitHub — mlflow/mlflow, набравший 28,920 звёзд. Открытая платформа для инженерной разработки ИИ для агентов, LLM и моделей ML. MLflow позволяет командам любого размера отлаживать, оценивать, мониторить и оптимизировать приложения ИИ производственного качества, контролируя затраты и управляя доступом к моделям и данным.

2

Какие языки программирования чаще всего используются в репозиториях по теме #apache-spark?

Среди наиболее высоко оценённых проектов по теме #apache-spark на GitHub чаще всего используются языки программирования Scala, Python, Java, Jupyter Notebook.

3

Как рассчитывается рейтинг репозиториев по теме #apache-spark?

Мы отслеживаем 44 активных репозиториев с открытым исходным кодом, отмеченных тегом #apache-spark (500 и более звёзд), с общим числом 97,788 звёзд и в среднем 2,222 звёзд на репозиторий. Рейтинги обновляются ежедневно на основе данных GitHub API.