Git Stars Git Stars

#big-data リポジトリ

#big-dataのタグが付いた、GitHub上の133件のアクティブなオープンソースリポジトリをご覧ください。合計スター数は683,600個で、プロジェクトあたりの平均は5,139個です。このトピックをリードしているのは、75,924個のスターを獲得しているbinhnguyennus/awesome-scalabilityです。

133
リポジトリ総数
683,600
合計スター数
5,139
リポジトリあたりの平均スター数

リポジトリ合計133件

1
binhnguyennus/awesome-scalability

スケーラブルで信頼性が高く、パフォーマンスの高い大規模システムのパターン

binhnguyennus
⭐ 75,924 👤 binhnguyennus User 🕐 更新日時 2026-01-04 📅 作成日 2017-12-27
2
ClickHouse/ClickHouse

ClickHouse®はリアルタイム分析データベース管理システムです

ClickHouse
⭐ 51,051 C++ 👤 ClickHouse Organization 🕐 更新日時 2026-11-21 📅 作成日 2016-06-02
3
apache/spark

Apache Spark - 大規模データ処理のための統合分析エンジン

apache
⭐ 44,593 Scala 👤 apache Organization 🕐 更新日時 2026-11-21 📅 作成日 2014-02-25
4
donnemartin/data-science-ipython-notebooks

データサイエンスPythonノートブック:ディープラーニング(TensorFlow、Theano、Caffe、Keras)、scikit-learn、Kaggle、ビッグデータ(Spark、Hadoop MapReduce、HDFS)、matplotlib、pandas、NumPy、SciPy、Pythonの基本、AWS、およびさまざまなコマンドライン。

donnemartin
⭐ 28,776 Python 👤 donnemartin User 🕐 更新日時 2024-03-20 📅 作成日 2015-01-23
5
apache/flink

Apache Flink

apache
⭐ 26,487 Java 👤 apache Organization 🕐 更新日時 2026-11-21 📅 作成日 2014-06-07
6
thingsboard/thingsboard

オールインワンIoTプラットフォーム — デバイス管理、データ収集、処理、可視化。

thingsboard
⭐ 22,701 Java 👤 thingsboard Organization 🕐 更新日時 2026-11-21 📅 作成日 2016-12-01
7
amark/gun

分散型グラフデータを同期するためのオープンソースのサイバーセキュリティプロトコル。

amark
⭐ 19,166 JavaScript 👤 amark User 🕐 更新日時 2026-11-20 📅 作成日 2014-07-31
8
heibaiying/BigData-Notes

ビッグデータ入門ガイド :star:

heibaiying
⭐ 16,818 Java 👤 heibaiying User 🕐 更新日時 2024-01-05 📅 作成日 2019-03-10
9
prestodb/presto

ビッグデータ向け Presto 分散 SQL クエリエンジンの公式ホームページ

prestodb
⭐ 16,777 Java 👤 prestodb Organization 🕐 更新日時 2026-11-20 📅 作成日 2012-08-09
10
andkret/Cookbook

データエンジニアリング・クックブック

andkret
⭐ 15,594 Python 👤 andkret User 🕐 更新日時 2026-10-16 📅 作成日 2019-03-10
11
trinodb/trino

Trino の公式リポジトリ、大規模データ用の分散 SQL クエリエンジン、以前は PrestoSQL (https://trino.io) として知られていました

trinodb
⭐ 13,532 Java 👤 trinodb Organization 🕐 更新日時 2026-11-21 📅 作成日 2019-01-19
12
vesoft-inc/nebula

水平スケーラビリティと高可用性を特徴とする分散型で高速なオープンソースのグラフデータベース

vesoft-inc
⭐ 12,474 C++ 👤 vesoft-inc Organization 🕐 更新日時 2026-09-08 📅 作成日 2018-08-28
13
StarRocks/starrocks

データレイクハウス内外でのサブセカンド分析を実現する、世界最速のオープンクエリエンジンです。ほぼあらゆるシナリオをサポートする柔軟性により、StarRocksは多次元分析、リアルタイム分析、アドホッククエリでクラス最高のパフォーマンスを提供します。Linux Foundationプロジェクト。

StarRocks
⭐ 12,278 Java 👤 StarRocks Organization 🕐 更新日時 2026-11-21 📅 作成日 2021-09-04
14
quickwit-oss/quickwit

可観測性のためのクラウドネイティブOSS検索エンジン

quickwit-oss
⭐ 11,810 Rust 👤 quickwit-oss Organization 🕐 更新日時 2026-11-20 📅 作成日 2021-04-13
15
provectus/kafka-ui

Apache Kafka 管理のためのオープンソース Web UI

provectus
⭐ 11,754 Java 👤 provectus Organization 🕐 更新日時 2024-07-26 📅 作成日 2019-11-26
16
cython/cython

最も広く使用されている Python から C へのコンパイラ

cython
⭐ 10,898 Cython 👤 cython Organization 🕐 更新日時 2026-11-19 📅 作成日 2010-11-21
17
apache/datafusion

Apache DataFusion SQL クエリエンジン

apache
⭐ 9,631 Rust 👤 apache Organization 🕐 更新日時 2026-11-21 📅 作成日 2021-04-17
18
catboost/catboost

決定木上の勾配ブースティングの高速、スケーラブル、高性能ライブラリ。Python、R、Java、C++向けのランキング、分類、回帰、および他の機械学習タスクに使用されます。CPUおよびGPUでの計算をサポートします。

catboost
⭐ 9,210 C++ 👤 catboost Organization 🕐 更新日時 2026-11-20 📅 作成日 2017-07-18
19
delta-io/delta

Spark、PrestoDB、Flink、Trino、Hive を含むコンピュートエンジンおよび API を使用して Lakehouse アーキテクチャを構築できるオープンソースのストレージフレームワーク

delta-io
⭐ 9,083 Scala 👤 delta-io Organization 🕐 更新日時 2026-11-21 📅 作成日 2019-04-22
20
apache/beam

Apache Beam は、バッチおよびストリーミング データ処理のための統一されたプログラミング モデルです。

apache
⭐ 8,723 Java 👤 apache Organization 🕐 更新日時 2026-11-21 📅 作成日 2016-02-02
21
arkime/arkime

Arkime は、オープンソースの大規模なフルパケットキャプチャ、インデキシング、データベースシステムです。

arkime
⭐ 7,583 C 👤 arkime Organization 🕐 更新日時 2026-11-20 📅 作成日 2012-07-06
22
h2oai/h2o-3

H2Oは、オープンソース、分散型、高速、スケーラブルな機械学習プラットフォームです。ディープラーニング、勾配ブースティング(GBM)およびXGBoost、ランダムフォレスト、一般化線形モデリング(Elastic Netを使用したGLM)、K-Means、PCA、一般化加法モデル(GAM)、RuleFit、サポートベクターマシン(SVM)、スタックドアンサンブル、自動機械学習(AutoML)など。

h2oai
⭐ 7,527 Jupyter Notebook 👤 h2oai Organization 🕐 更新日時 2026-11-11 📅 作成日 2014-03-03
23
feast-dev/feast

AI/MLのためのオープンソース機能ストア

feast-dev
⭐ 7,362 Python 👤 feast-dev Organization 🕐 更新日時 2026-11-21 📅 作成日 2018-12-10
24
vespa-engine/vespa

AI検索プラットフォーム

vespa-engine
⭐ 7,190 Java 👤 vespa-engine Organization 🕐 更新日時 2026-11-21 📅 作成日 2016-06-03
25
apache/couchdb

直感的 HTTP/JSON API を備えたシームレスなマルチプライマリ同期データベース、信頼性のために設計

apache
⭐ 7,013 Erlang 👤 apache Organization 🕐 更新日時 2026-11-21 📅 作成日 2009-05-21
26
apache/zeppelin

SQL、Scala などを用いたデータ駆動型でインタラクティブなデータ分析と協働ドキュメントを可能にするウェブベースのノートブック。

apache
⭐ 6,670 Java 👤 apache Organization 🕐 更新日時 2026-11-20 📅 作成日 2015-03-25
27
hazelcast/hazelcast

Hazelcast は、ストリーム処理と高速データストアを組み合わせた統合リアルタイムデータプラットフォームで、顧客がデータ・イン・モーションに対して即座に行動を起こし、リアルタイムの洞察を得られるようにします。

hazelcast
⭐ 6,636 Java 👤 hazelcast Organization 🕐 更新日時 2026-11-20 📅 作成日 2012-03-21
28
apache/iotdb

Apache IoTDB

apache
⭐ 6,437 Java 👤 apache Organization 🕐 更新日時 2026-11-21 📅 作成日 2018-11-24
29
pachyderm/pachyderm

データ中心のパイプラインとデータバージョニング

pachyderm
⭐ 6,295 Go 👤 pachyderm Organization 🕐 更新日時 2025-02-03 📅 作成日 2014-09-04
30
vcaesar/riot

Go製のオープンソースで分散型、シンプルかつ高速・高効率なテキスト/ベクトル検索エンジン

vcaesar
⭐ 6,068 Go 👤 vcaesar User 🕐 更新日時 2026-11-20 📅 作成日 2017-06-21
31
apache/hive

Apache Hive

apache
⭐ 6,038 Java 👤 apache Organization 🕐 更新日時 2026-11-21 📅 作成日 2009-05-21
32
Eventual-Inc/Daft

AIおよびマルチモーダルワークロード向けの高性能データエンジン。画像、オーディオ、ビデオ、構造化データをあらゆる規模で処理します。

Eventual-Inc
⭐ 5,858 Rust 👤 Eventual-Inc Organization 🕐 更新日時 2026-11-09 📅 作成日 2022-04-25
33
microsoft/SynapseML

Spark 用の ML アルゴリズムを移植する、シンプルで分散型の機械学習 Python ライブラリ

microsoft
⭐ 5,257 Scala 👤 microsoft Organization 🕐 更新日時 2026-11-18 📅 作成日 2017-06-05
34
apache/calcite

Apache Calcite

apache
⭐ 5,216 Java 👤 apache Organization 🕐 更新日時 2026-11-19 📅 作成日 2014-06-25
35
apache/ignite

Apache Ignite

apache
⭐ 5,090 Java 👤 apache Organization 🕐 更新日時 2026-11-20 📅 作成日 2015-02-19
36
tschellenbach/Stream-Framework

Stream Frameworkは、CassandraやRedisを使用してニュースフィード、アクティビティストリーム、および通知システムを構築できるようにするPythonライブラリです。Stream-Frameworkの作者は、フィード技術のためのクラウドサービスも提供しています:

tschellenbach
⭐ 4,739 Python 👤 tschellenbach User 🕐 更新日時 2025-12-04 📅 作成日 2012-08-08
37
tangbc/vue-virtual-scroll-list

⚡️ 大量のデータリストをサポートするVueコンポーネントで、高いレンダリングパフォーマンスと効率性。

tangbc
⭐ 4,544 JavaScript 👤 tangbc User 🕐 更新日時 2024-05-08 📅 作成日 2017-03-17
38
rom1504/img2dataset

大量の画像URLを画像データセットに簡単に変換できます。1台のマシンで20時間で1億件のURLをダウンロード、リサイズ、パッケージ化できます。

rom1504
⭐ 4,458 Python 👤 rom1504 User 🕐 更新日時 2025-10-19 📅 作成日 2021-08-11
39
crate/crate

CrateDB は、分散型でスケーラブルな SQL データベースで、大量のデータをほぼリアルタイムで保存・分析でき、複雑なクエリでも可能です。PostgreSQL と互換性があり、Lucene を基盤としています。

crate
⭐ 4,456 Java 👤 crate Organization 🕐 更新日時 2026-11-20 📅 作成日 2013-04-10
40
alibaba/fastjson2

🚄 FASTJSON2は、優れたパフォーマンスを持つJava JSONライブラリです。

alibaba
⭐ 4,433 Java 👤 alibaba Organization 🕐 更新日時 2026-11-15 📅 作成日 2022-04-17
41
Moataz-Elmesmary/Data-Science-Roadmap

AからZまでのデータサイエンスロードマップ

Moataz-Elmesmary
⭐ 4,429 👤 Moataz-Elmesmary User 🕐 更新日時 2025-12-06 📅 作成日 2022-04-17
42
Rdatatable/data.table

Rのdata.tableパッケージはdata.frameを拡張します:

Rdatatable
⭐ 3,930 R 👤 Rdatatable Organization 🕐 更新日時 2026-11-20 📅 作成日 2014-06-07
43
alibaba/GraphScope

🔨 🍇 💻 🚀 GraphScope: Alibaba のワンストップ大規模グラフコンピューティングシステム | ワンストップグラフコンピューティングシステム

alibaba
⭐ 3,564 C++ 👤 alibaba Organization 🕐 更新日時 2026-09-23 📅 作成日 2020-10-28
44
lakehq/sail

Rustで書かれたApache Sparkのドロップイン代替品で、バッチ処理、ストリーム処理、計算集約型のAIワークロードを統一します。

lakehq
⭐ 3,504 Rust 👤 lakehq Organization 🕐 更新日時 2026-11-21 📅 作成日 2023-12-21
45
apache/datafusion-sqlparser-rs

Rust 用の拡張可能な SQL レクサーおよびパーサー

apache
⭐ 3,483 Rust 👤 apache Organization 🕐 更新日時 2026-11-21 📅 作成日 2018-02-06
⭐ 3,476 HTML 👤 NLPIR-team Organization 🕐 更新日時 2026-07-30 📅 作成日 2015-05-04
47
apache/paimon

Apache Paimonは、ストリーミングおよびバッチ操作の両方でFlinkおよびSparkを使用したRealtime Lakehouseアーキテクチャを構築できるレイクフォーマットです。

apache
⭐ 3,454 Java 👤 apache Organization 🕐 更新日時 2026-11-21 📅 作成日 2022-01-12
48
databricks/koalas

Koalas: Apache Spark 上の pandas API

databricks
⭐ 3,368 Python 👤 databricks Organization 🕐 更新日時 2024-03-20 📅 作成日 2019-01-03
49
apache/hugegraph

1000億以上のデータをサポートするグラフデータベース、高性能とスケーラビリティ(OLTPエンジン & REST-API & バックエンドを含む)

apache
⭐ 3,211 Java 👤 apache Organization 🕐 更新日時 2026-11-19 📅 作成日 2018-07-18
50
TuiQiao/CBoard

使いやすいセルフサービス型のオープン BI レポートおよび BI ダッシュボード プラットフォーム。

TuiQiao
⭐ 3,099 JavaScript 👤 TuiQiao Organization 🕐 更新日時 2026-11-16 📅 作成日 2016-09-21

よくある質問

1

GitHubで最も人気のある#big-dataリポジトリは何ですか?

GitHubで最も上位にランクインしているオープンソースの#big-dataプロジェクトは、75,924個のスターを獲得しているbinhnguyennus/awesome-scalabilityです。スケーラブルで信頼性が高く、パフォーマンスの高い大規模システムのパターン

2

#big-dataリポジトリで最もよく使われているプログラミング言語は何ですか?

GitHubで上位にランクインしている#big-dataプロジェクトでは、Java, Python, Rust, C++が最も一般的なプログラミング言語です。

3

#big-dataリポジトリのランキングはどのように算出されていますか?

#big-dataのタグが付いた133件のアクティブなオープンソースリポジトリ(スター500個以上)を追跡しています。合計スター数は683,600個で、リポジトリあたりの平均は5,139個です。ランキングはGitHub APIからのデータに基づいて毎日更新されます。