Git Stars Git Stars

#distributed-computing 仓库

99
仓库总数
277,188
总星标数
2,799
平均每个仓库星标数
51
dotnetcore/SmartSql

SmartSql = C# 中的 MyBatis + .NET Core + 缓存(内存 | Redis) + 读写分离 + PropertyChangedTrack + 动态 Repository + InvokeSync + Diagnostics

dotnetcore
⭐ 1,134 C# 👤 dotnetcore Organization 🕐 已更新 2026-11-20 📅 创建时间 2017-04-01
52
taikoxyz/simple-taiko-node

使用单个命令启动您的 Taiko 节点。 🌐

taikoxyz
⭐ 1,106 Shell 👤 taikoxyz Organization 🕐 已更新 2026-11-06 📅 创建时间 2022-12-05
53
JohnSnowLabs/spark-nlp-workshop

使用 John Snow Labs 的 Apache Spark NLP 的公共可运行示例。

JohnSnowLabs
⭐ 1,089 Jupyter Notebook 👤 JohnSnowLabs Organization 🕐 已更新 2026-11-17 📅 创建时间 2018-08-20
54
joshuaboniface/rffmpeg

rffmpeg: 远程 SSH FFmpeg 封装工具

joshuaboniface
⭐ 1,087 Python 👤 joshuaboniface User 🕐 已更新 2025-11-03 📅 创建时间 2019-10-19
55
mahmoudparsian/data-algorithms-book

数据算法丛书:MapReduce、Spark、Java 和 Scala

mahmoudparsian
⭐ 1,083 Java 👤 mahmoudparsian User 🕐 已更新 2024-10-14 📅 创建时间 2014-08-06
56
NVIDIA-NeMo/Skills

一个提升大型语言模型能力的改进项目

NVIDIA-NeMo
⭐ 1,065 Python 👤 NVIDIA-NeMo Organization 🕐 已更新 2026-11-18 📅 创建时间 2024-02-11
57
pytorch/tensordict

一种表现得像单个张量的 dict[str, torch.Tensor],以及 TensorClass:可编译的类型化批处理数据类。

pytorch
⭐ 1,046 Python 👤 pytorch Organization 🕐 已更新 2026-11-21 📅 创建时间 2022-10-19
58
bcbio/bcbio-nextgen

已验证、可扩展、社区开发的变异调用、RNA-seq和小RNA分析

bcbio
⭐ 1,023 Python 👤 bcbio Organization 🕐 已更新 2024-08-24 📅 创建时间 2013-02-06
59
futureverse/future

:rocket: R 包: future: R 中为所有人提供的统一并行和分布式处理

futureverse
⭐ 1,014 R 👤 futureverse Organization 🕐 已更新 2026-11-17 📅 创建时间 2015-06-08
61
lizardfs/lizardfs

LizardFS 是一个开源分布式文件系统,根据 GPLv3 许可。

lizardfs
⭐ 987 C++ 👤 lizardfs Organization 🕐 已更新 2024-08-11 📅 创建时间 2013-05-01
62
nv-legate/cupynumeric

生命周期结束;不再维护。最终公开发布版本:v26.06.01。

nv-legate
⭐ 982 Python 👤 nv-legate Organization 🕐 已更新 2026-10-01 📅 创建时间 2021-04-11
63
dask/dask-ml

使用 Dask 的可扩展机器学习

dask
⭐ 950 Python 👤 dask Organization 🕐 已更新 2025-09-27 📅 创建时间 2017-06-15
64
couler-proj/couler

用于在 Argo Workflows、Tekton Pipelines 和 Apache Airflow 等不同工作流引擎上构建和管理工作流的统一接口。

couler-proj
⭐ 944 Python 👤 couler-proj Organization 🕐 已更新 2024-10-08 📅 创建时间 2020-08-18
65
lichess-org/fishnet

lichess.org 的分布式 Stockfish 分析

lichess-org
⭐ 944 Rust 👤 lichess-org Organization 🕐 已更新 2026-11-05 📅 创建时间 2016-03-10
66
criteo/autofaiss

自动创建具有最优相似性搜索参数的 Faiss knn 索引。

criteo
⭐ 906 Python 👤 criteo Organization 🕐 已更新 2025-11-04 📅 创建时间 2021-04-28
67
aphyr/tesser

Clojure reducers,但适用于并行执行:本地和分布式系统。

aphyr
⭐ 893 Clojure 👤 aphyr User 🕐 已更新 2026-07-17 📅 创建时间 2014-11-11
68
BaguaSys/bagua

Bagua 加速PyTorch

BaguaSys
⭐ 881 Python 👤 BaguaSys Organization 🕐 已更新 2024-08-01 📅 创建时间 2021-05-25
69
pywren/pywren

Teraflops 和微服务

pywren
⭐ 854 Python 👤 pywren Organization 🕐 已更新 2024-02-10 📅 创建时间 2016-10-03
70
gojek/awesome-distributed-systems

分布式系统资源的优秀列表

gojek
⭐ 836 👤 gojek Organization 🕐 已更新 2024-07-10 📅 创建时间 2018-08-16
71
fyoorer/ShadowClone

释放云的力量

fyoorer
⭐ 822 Python 👤 fyoorer User 🕐 已更新 2026-09-30 📅 创建时间 2022-01-21
72
centerforaisafety/HarmBench

HarmBench:面向自动化红队演练和鲁棒拒绝的标准化评估框架

centerforaisafety
⭐ 819 Jupyter Notebook 👤 centerforaisafety Organization 🕐 已更新 2024-08-16 📅 创建时间 2024-02-02
73
taskflow/awesome-parallel-computing

一份精选的超棒的并行计算资源列表

taskflow
⭐ 810 👤 taskflow Organization 🕐 已更新 2026-11-11 📅 创建时间 2019-09-19
74
zju3dv/DetectorFreeSfM

“无检测器运动恢复结构 (Detector-Free Structure from Motion)” 代码, CVPR 2024

zju3dv
⭐ 765 Python 👤 zju3dv Organization 🕐 已更新 2026-09-15 📅 创建时间 2023-06-27
75
databricks/tensorframes

[DEPRECATED] Apache Spark 上 DataFrames 的 Tensorflow 包装器

databricks
⭐ 745 Scala 👤 databricks Organization 🕐 已更新 2024-07-30 📅 创建时间 2016-03-04
76
muaimingjun/bigData

大数据比赛项目库

muaimingjun
⭐ 734 Python 👤 muaimingjun User 🕐 已更新 2025-05-07 📅 创建时间 2019-10-14
77
JuliaParallel/Dagger.jl

用于内存外和并行执行的框架

JuliaParallel
⭐ 734 Julia 👤 JuliaParallel Organization 🕐 已更新 2026-11-02 📅 创建时间 2015-12-03
78
lablup/backend.ai

Backend.AI是一个简化的、基于容器的计算集群平台,支持流行的计算/ML框架和各种编程语言,并支持即插即用的异构加速器,包括CUDA GPU、ROCm GPU、Gaudi NPU、Google TPU、GraphCore IPU和其他NPU。

lablup
⭐ 681 Python 👤 lablup Organization 🕐 已更新 2026-11-20 📅 创建时间 2016-10-06
79
google/yggdrasil-decision-forests

用于训练、评估、解释和生产决策森林模型(如随机森林和梯度提升决策树)的库。

google
⭐ 680 C++ 👤 google Organization 🕐 已更新 2026-11-20 📅 创建时间 2021-04-22
80
DrHazemAli/enterprise-system-design

一门以权威资料为依据的课程和架构参考,面向设计必须经受真实流量、部分故障、安全审查和需求变化考验的系统工程师,涵盖企业系统设计、分布式系统、人工智能系统、网络安全、可靠性、云计算、高性能计算、边缘计算以及任务关键型基础设施。

DrHazemAli
⭐ 663 👤 DrHazemAli User 🕐 已更新 2026-11-12 📅 创建时间 2026-08-12
81
google-research/weatherbench2

下一代数据驱动的全球天气模型的基准。

google-research
⭐ 650 Python 👤 google-research Organization 🕐 已更新 2026-11-17 📅 创建时间 2023-02-24
82
WwZzz/easyFL

一个用于联邦学习的实验平台。

WwZzz
⭐ 635 Jupyter Notebook 👤 WwZzz User 🕐 已更新 2026-10-20 📅 创建时间 2021-05-10
83
Lightning-AI/litData

通过修复数据加载来加速模型训练。

Lightning-AI
⭐ 617 Python 👤 Lightning-AI Organization 🕐 已更新 2026-11-17 📅 创建时间 2024-02-15
84
scottdraves/electricsheep

无限演化众包艺术作品

scottdraves
⭐ 617 C 👤 scottdraves User 🕐 已更新 2026-04-17 📅 创建时间 2015-03-28
⭐ 613 HTML 👤 gridcoin-community Organization 🕐 已更新 2026-11-20 📅 创建时间 2014-08-25
86
apache/datafusion-python

Apache DataFusion Python 绑定

apache
⭐ 612 Python 👤 apache Organization 🕐 已更新 2026-11-15 📅 创建时间 2022-07-20
87
jaylfc/taOS

自托管 AI 智能体操作系统。您的记忆、聊天记录、智能体和文件都存储在您拥有的硬件上,默认离线,云端可选。具备离线 AI 记忆 (taOSmd)、自托管多框架群聊、完整的 Web 桌面 + 应用商店,以及跨您现有消费级硬件(Orange/Raspberry Pi、Mac mini、游戏 PC)的自动集群功能。

jaylfc
⭐ 609 Python 👤 jaylfc User 🕐 已更新 2026-11-20 📅 创建时间 2026-04-05
88
AIxBlock-2023/awesome-ai-dev-platform-opensource

一个使用去中心化资源进行快速人工智能模型产品化的链上开源平台,具有灵活性和可扩展性

AIxBlock-2023
⭐ 605 TypeScript 👤 AIxBlock-2023 Organization 🕐 已更新 2025-11-29 📅 创建时间 2024-12-30
⭐ 604 Jupyter Notebook 👤 generative-ai-on-aws Organization 🕐 已更新 2024-10-09 📅 创建时间 2023-08-24
90
jmerelnyc/Talos

Talos网络的GPU工作节点客户端。与您的Talos账户配对,通过WebSocket提供开放模型推理任务,并报告运行时间以获取报酬。

jmerelnyc
⭐ 600 Python 👤 jmerelnyc User 🕐 已更新 2026-07-08 📅 创建时间 2026-07-02
91
geopandas/dask-geopandas

使用 Dask 进行并行 GeoPandas

geopandas
⭐ 593 Python 👤 geopandas Organization 🕐 已更新 2026-07-21 📅 创建时间 2020-02-13
92
YotpoLtd/metorikku

基于 Apache Spark 的简化轻量级 ETL 框架

YotpoLtd
⭐ 589 Scala 👤 YotpoLtd Organization 🕐 已更新 2026-09-01 📅 创建时间 2017-10-10
93
It4innovations/hyperqueue

适用于 HPC 系统的子节点任务的易用型调度器

It4innovations
⭐ 576 Rust 👤 It4innovations Organization 🕐 已更新 2026-11-16 📅 创建时间 2021-03-18
94
Harries/springboot-demo

一个简单的 Spring Boot 演示,包含一些组件,例如:redis、solr、rockmq 等。

Harries
⭐ 575 Java 👤 Harries User 🕐 已更新 2026-05-10 📅 创建时间 2023-12-01
95
hazelcast/hazelcast-code-samples

Hazelcast 代码示例

hazelcast
⭐ 558 Java 👤 hazelcast Organization 🕐 已更新 2026-11-02 📅 创建时间 2013-07-27
96
kubeflow/mpi-operator

用于基于MPI的应用程序(分布式训练、HPC等)的Kubernetes Operator

kubeflow
⭐ 543 Go 👤 kubeflow Organization 🕐 已更新 2026-11-21 📅 创建时间 2018-05-26
97
cas-bigdatalab/piflow

πflow 是一个支持 Spark 的大数据流引擎

cas-bigdatalab
⭐ 541 Python 👤 cas-bigdatalab Organization 🕐 已更新 2026-11-20 📅 创建时间 2018-05-03
98
LearningJournal/Spark-Programming-In-Python

Apache Spark 3 - 初学者 Python Spark 编程

LearningJournal
⭐ 510 Python 👤 LearningJournal User 🕐 已更新 2024-07-25 📅 创建时间 2020-05-31
99
NVIDIA/NeMo-Framework-Launcher

提供适用于 LLM 和多模态模型的端到端模型开发管道,这些管道可以在本地或云原生环境中启动。

NVIDIA
⭐ 508 Python 👤 NVIDIA Organization 🕐 已更新 2025-04-18 📅 创建时间 2023-01-05