Git Stars Git Stars

#hadoop Репозитории

Откройте для себя 43 активных репозиториев с открытым исходным кодом на GitHub, отмеченных тегом #hadoop, с общим числом 238,277 звёзд (в среднем 5,541 на проект). Лидером этой темы является donnemartin/data-science-ipython-notebooks, набравший 28,776 звёзд.

43
Всего репозиториев
238,277
Всего звезд
5,541
Среднее количество звезд на репозиторий
Языки программирования: Java Python Shell Scala HTML Jupyter Notebook

Всего репозиториев: 43

1
donnemartin/data-science-ipython-notebooks

Python-ноутбуки по науке о данных: глубокое обучение (TensorFlow, Theano, Caffe, Keras), scikit-learn, Kaggle, большие данные (Spark, Hadoop MapReduce, HDFS), matplotlib, pandas, NumPy, SciPy, основы Python, AWS и различные командные строки.

donnemartin
⭐ 28,776 Python 👤 donnemartin User 🕐 Обновлено 2024-03-20 📅 Создано 2015-01-23
2
spotify/luigi

Luigi — это модуль Python, который помогает создавать сложные конвейеры пакетных заданий. Он обрабатывает разрешение зависимостей, управление рабочими процессами, визуализацию и т. д. Он также имеет встроенную поддержку Hadoop.

spotify
⭐ 18,793 Python 👤 spotify Organization 🕐 Обновлено 2026-11-20 📅 Создано 2012-09-20
3
APIJSON/APIJSON

🏆 ORM в реальном времени без кода, мощный и безопасный 🚀 предоставляет API и Docs без кода со стороны Backend, а Frontend (Client) может кастомизировать ответы в формате JSON 🏆 ORM в реальном времени, без кода, полностью функциональный и высоко защищенный 🚀 API и документация Backend без кода, а Frontend (Client) может настроить возвращаемые данные и структуру JSON.

APIJSON
⭐ 18,395 Java 👤 APIJSON Organization 🕐 Обновлено 2026-11-15 📅 Создано 2016-11-21
4
heibaiying/BigData-Notes

Руководство по введению в большие данные :star:

heibaiying
⭐ 16,818 Java 👤 heibaiying User 🕐 Обновлено 2024-01-05 📅 Создано 2019-03-10
5
prestodb/presto

Официальный сайт распределенного SQL-движка запросов Presto для больших данных

prestodb
⭐ 16,777 Java 👤 prestodb Organization 🕐 Обновлено 2026-11-20 📅 Создано 2012-08-09
6
apache/hadoop

Apache Hadoop

apache
⭐ 15,719 Java 👤 apache Organization 🕐 Обновлено 2026-11-21 📅 Создано 2014-08-28
7
deeplearning4j/deeplearning4j

Набор инструментов для развертывания и обучения моделей глубокого обучения с использованием JVM. Основные возможности включают импорт моделей для Keras, TensorFlow и ONNX/PyTorch, модульную и крошечную библиотеку C++ для выполнения математического кода и математическую библиотеку на основе Java поверх основной библиотеки C++. Также включает samediff: библиотеку, похожую на PyTorch/TensorFlow, для выполнения глубокого обучения...

deeplearning4j
⭐ 14,283 Java 👤 deeplearning4j Organization 🕐 Обновлено 2026-10-05 📅 Создано 2013-11-27
8
trinodb/trino

Официальный репозиторий Trino, распределённого SQL-движка запросов для больших данных, ранее известного как PrestoSQL (https://trino.io)

trinodb
⭐ 13,532 Java 👤 trinodb Organization 🕐 Обновлено 2026-11-21 📅 Создано 2019-01-19
9
HariSekhon/DevOps-Bash-tools

1200+ скриптов Bash для DevOps - AWS, GCP, Kubernetes, Docker, CI/CD, API, SQL, PostgreSQL, MySQL, Hive, Impala, Kafka, Hadoop, Jenkins, GitHub, GitLab, BitBucket, Azure DevOps, TeamCity, Spotify, MP3, LDAP, Линтинг кода/сборки, управление пакетами для Linux, Mac, Python, Perl, Ruby, NodeJS, Golang, Расширенные dot-файлы: .bashrc, .vimrc, .gitconfig, .screenrc, tmux..

HariSekhon
⭐ 8,439 Shell 👤 HariSekhon User 🕐 Обновлено 2026-11-18 📅 Создано 2016-01-17
10
linkedin/school-of-sre

В LinkedIn мы используем эту учебную программу для адаптации наших начинающих специалистов к роли SRE.

linkedin
⭐ 8,154 HTML 👤 linkedin Organization 🕐 Обновлено 2025-12-25 📅 Создано 2020-10-26
11
h2oai/h2o-3

H2O — это Open Source, распределенная, быстрая и масштабируемая платформа машинного обучения: Deep Learning, Gradient Boosting (GBM) и XGBoost, Random Forest, Generalized Linear Modeling (GLM с Elastic Net), K-Means, PCA, Generalized Additive Models (GAM), RuleFit, Support Vector Machine (SVM), Stacked Ensembles, Automatic Machine Learning (AutoML) и т. д.

h2oai
⭐ 7,527 Jupyter Notebook 👤 h2oai Organization 🕐 Обновлено 2026-11-11 📅 Создано 2014-03-03
12
Alluxio/alluxio

Alluxio, оркестровка данных для аналитики и машинного обучения в облаке

Alluxio
⭐ 7,264 Java 👤 Alluxio Organization 🕐 Обновлено 2026-09-01 📅 Создано 2012-12-21
13
apache/hive

Apache Hive

apache
⭐ 6,038 Java 👤 apache Organization 🕐 Обновлено 2026-11-21 📅 Создано 2009-05-21
14
apache/calcite

Apache Calcite

apache
⭐ 5,216 Java 👤 apache Organization 🕐 Обновлено 2026-11-19 📅 Создано 2014-06-25
15
apache/ignite

Apache Ignite

apache
⭐ 5,090 Java 👤 apache Organization 🕐 Обновлено 2026-11-20 📅 Создано 2015-02-19
16
apache/nutch

Apache Nutch — это расширяемый и масштабируемый веб-краулер

apache
⭐ 3,311 Java 👤 apache Organization 🕐 Обновлено 2026-11-17 📅 Создано 2009-05-21
17
WeBankFinTech/DataSphereStudio

DataSphereStudio — это портал для разработки и управления приложениями данных в формате "одно окно", охватывающий сценарии, включая обмен данными, десенсибилизацию/очистку, анализ/добычу данных, измерение качества, визуализацию и планирование задач.

WeBankFinTech
⭐ 3,275 Java 👤 WeBankFinTech Organization 🕐 Обновлено 2025-11-04 📅 Создано 2019-11-24
18
MoRan1607/BigDataGuide

Обучение большим данным, Изучение больших данных с нуля, Включает видеоуроки и материалы для собеседований на каждом этапе обучения большим данным

MoRan1607
⭐ 3,259 👤 MoRan1607 User 🕐 Обновлено 2026-01-20 📅 Создано 2019-11-30
19
RayXBuilds/Movie_Recommend

Прошлый учебный проект: рекомендации фильмов с помощью Spark, веб-скрейпинг, веб-приложение и бэкенд. Разработка новой версии продолжается в cinematch-recommender.

RayXBuilds
⭐ 3,007 Java 👤 RayXBuilds User 🕐 Обновлено 2026-10-21 📅 Создано 2018-04-18
20
geekyouth/SZT-bigdata

Система анализа пассажиропотока больших данных метрополитена Шэньчжэня🚇🚄🌟

geekyouth
⭐ 2,469 Scala 👤 geekyouth User 🕐 Обновлено 2026-05-12 📅 Создано 2020-04-13
21
apache/kyuubi

Apache Kyuubi — это распределенный и многоарендный шлюз для предоставления бессерверного SQL на складах данных и озерных домах.

apache
⭐ 2,379 Scala 👤 apache Organization 🕐 Обновлено 2026-11-19 📅 Создано 2017-12-18
22
big-data-europe/docker-hadoop

Образ Docker Apache Hadoop

big-data-europe
⭐ 2,312 Shell 👤 big-data-europe Organization 🕐 Обновлено 2024-02-01 📅 Создано 2016-03-09
23
h2oai/h2o-2

Пожалуйста, посетите https://github.com/h2oai/h2o-3 для последней версии H2O

h2oai
⭐ 2,307 Java 👤 h2oai Organization 🕐 Обновлено 2024-10-24 📅 Создано 2013-02-06
24
cdarlint/winutils

бинарные файлы winutils.exe, hadoop.dll и hdfs.dll для hadoop windows

cdarlint
⭐ 2,205 Shell 👤 cdarlint User 🕐 Обновлено 2024-05-16 📅 Создано 2019-01-04
25
apache/drill

Apache Drill — это распределённый слой запросов MPP для самодескриптивных данных

apache
⭐ 2,026 Java 👤 apache Organization 🕐 Обновлено 2026-11-12 📅 Создано 2012-09-05
26
elastic/elasticsearch-hadoop

:elephant: Elasticsearch в режиме реального времени для поиска и анализа, интегрированный с Hadoop

elastic
⭐ 1,966 Java 👤 elastic Organization 🕐 Обновлено 2026-11-21 📅 Создано 2013-03-11
27
collabH/bigdata-growth

Репозиторий знаний больших данных включает моделирование хранилищ данных, обработку данных в реальном времени, большие данные, централизованную платформу данных, проектирование систем, Java, алгоритмы и т. д.

collabH
⭐ 1,838 Python 👤 collabH User 🕐 Обновлено 2026-04-18 📅 Создано 2020-06-10
28
OBenner/data-engineering-interview-questions

Более 2000+ вопросов для собеседования инженера данных.

OBenner
⭐ 1,815 Python 👤 OBenner User 🕐 Обновлено 2026-01-13 📅 Создано 2021-08-08
29
Qihoo360/hbox

ИИ на Hadoop

Qihoo360
⭐ 1,729 Java 👤 Qihoo360 Organization 🕐 Обновлено 2025-07-01 📅 Создано 2017-12-01
30
wgzhao/Addax

Активно развиваемый преемник Alibaba DataX — быстрый и универсальный ETL-инструмент с открытым исходным кодом для более чем 30 источников данных RDBMS и NoSQL.

wgzhao
⭐ 1,455 Java 👤 wgzhao User 🕐 Обновлено 2026-11-20 📅 Создано 2019-07-17
31
apache/carbondata

Высокопроизводительное решение для хранения данных

apache
⭐ 1,452 Scala 👤 apache Organization 🕐 Обновлено 2026-10-02 📅 Создано 2016-06-28
32
HariSekhon/Dockerfiles

50+ публичные образы DockerHub для Docker & Kubernetes - DevOps, CI/CD, GitHub Actions, CircleCI, Jenkins, TeamCity, Alpine, CentOS, Debian, Fedora, Ubuntu, Hadoop, Kafka, ZooKeeper, HBase, Cassandra, Solr, SolrCloud, Presto, Apache Drill, Nifi, Spark, Consul, Riak

HariSekhon
⭐ 1,382 Shell 👤 HariSekhon User 🕐 Обновлено 2026-02-03 📅 Создано 2016-01-17
33
apache/ozone

Масштабируемая, надежная, распределенная система хранения, оптимизированная для аналитики данных и нагрузок хранилища объектов.

apache
⭐ 1,335 Java 👤 apache Organization 🕐 Обновлено 2026-11-20 📅 Создано 2019-10-02
34
DTStack/Taier

Taier — это платформа разработки больших данных для подачи, планирования, эксплуатации и обслуживания, а также отображения информации об индикаторах

DTStack
⭐ 1,285 Java 👤 DTStack Organization 🕐 Обновлено 2026-11-05 📅 Создано 2021-03-02
35
HariSekhon/Nagios-Plugins

450+ AWS, Hadoop, Облако, Kafka, Docker, Elasticsearch, RabbitMQ, Redis, HBase, Solr, Cassandra, ZooKeeper, HDFS, Yarn, Hive, Presto, Drill, Impala, Consul, Spark, Jenkins, Travis CI, Git, MySQL, Linux, DNS, Whois, Сертификаты SSL, Обновления безопасности Yum, Kubernetes, Cloudera и т.д...

HariSekhon
⭐ 1,155 Python 👤 HariSekhon User 🕐 Обновлено 2026-02-03 📅 Создано 2012-12-30
36
realguoshuai/hadoop_study

Регулярное обновление документации по常用组件ам больших данных в экосистеме Hadoop. Приоритеты по порядку: Flink, Solr, Sparksql, ES, Scala, Kafka, Hbase/phoenix, Redis, Kerberos (проект включает ментальную карту Hadoop, заметки Evernote, простую демо версии Scala, общие классы утилит, десенсибилизированный код обучения, непрерывные обновления!!!)

realguoshuai
⭐ 916 Java 👤 realguoshuai User 🕐 Обновлено 2026-03-09 📅 Создано 2017-12-15
37
HariSekhon/DevOps-Python-tools

80+ инструментов CLI DevOps и данных - AWS, GCP, GCF Python Cloud Functions, Log Anonymizer, Spark, Hadoop, HBase, Hive, Impala, Linux, Docker, Конвертеры и валидаторы данных Spark (Avro/Parquet/JSON/CSV/INI/XML/YAML), Travis CI, AWS CloudFormation, Elasticsearch, Solr и т.д.

HariSekhon
⭐ 824 Python 👤 HariSekhon User 🕐 Обновлено 2026-02-03 📅 Создано 2015-10-27
38
HuQi2018/BiSheServer

Эта система является моим дипломным проектом под названием «Проектирование и реализация системы рекомендаций фильмов на основе профилей пользователей». В качестве основной платформы используется Django с применением модели MTV, а в качестве баз данных — MongoDB, MySQL и Redis. В качестве основного источника данных используются данные о фильмах, собранные с платформы Douban. Метки пользователей разрабатываются в основном на основе основной информации о пользователе и поведенческой информации, такой как записи операций использования. Это система рекомендаций, использующая компоненты больших данных Hadoop и Spark для анализа и обработки. Система управления использует встроенную систему управления Django, украшенную SimpleUI.

HuQi2018
⭐ 743 Python 👤 HuQi2018 User 🕐 Обновлено 2026-06-02 📅 Создано 2021-03-28
39
WeBankFinTech/WeDataSphere

WeDataSphere — это финансовый уровень, одноступенчатая платформа для больших данных в полном комплекте.

WeBankFinTech
⭐ 676 👤 WeBankFinTech Organization 🕐 Обновлено 2024-03-14 📅 Создано 2019-07-23
40
AbsaOSS/spline

Решение для отслеживания и визуализации происхождения данных

AbsaOSS
⭐ 669 Scala 👤 AbsaOSS Organization 🕐 Обновлено 2026-11-04 📅 Создано 2017-05-30
41
linkedin/venice

Venice, Платформа производных данных для рабочих нагрузок планетарного масштаба.

linkedin
⭐ 622 Java 👤 linkedin Organization 🕐 Обновлено 2026-11-21 📅 Создано 2021-03-18
42
ittqqzz/ECommerceRecommendSystem

Система рекомендаций товаров на основе больших данных электронной коммерции в реальном времени, Vue + TypeScript + ElementUI + Spring + Spark

ittqqzz
⭐ 528 Java 👤 ittqqzz User 🕐 Обновлено 2026-02-13 📅 Создано 2019-10-28
43
apache/tez

Apache Tez

apache
⭐ 523 Java 👤 apache Organization 🕐 Обновлено 2026-11-10 📅 Создано 2013-04-08

Часто задаваемые вопросы

1

Какой репозиторий по теме #hadoop наиболее популярен на GitHub?

Самый высоко оценённый проект с открытым исходным кодом по теме #hadoop на GitHub — donnemartin/data-science-ipython-notebooks, набравший 28,776 звёзд. Python-ноутбуки по науке о данных: глубокое обучение (TensorFlow, Theano, Caffe, Keras), scikit-learn, Kaggle, большие данные (Spark, Hadoop MapReduce, HDFS), matplotlib, pandas, NumPy, SciPy, основы Python, AWS и различные командные строки.

2

Какие языки программирования чаще всего используются в репозиториях по теме #hadoop?

Среди наиболее высоко оценённых проектов по теме #hadoop на GitHub чаще всего используются языки программирования Java, Python, Shell, Scala.

3

Как рассчитывается рейтинг репозиториев по теме #hadoop?

Мы отслеживаем 43 активных репозиториев с открытым исходным кодом, отмеченных тегом #hadoop (500 и более звёзд), с общим числом 238,277 звёзд и в среднем 5,541 звёзд на репозиторий. Рейтинги обновляются ежедневно на основе данных GitHub API.