Git Stars Git Stars

#deduplication 仓库

探索 26 个标记为 #deduplication 的活跃开源 GitHub 仓库,它们累计获得 133,156 个 Star(平均每个项目 5,121 个)。该主题的领先项目是 restic/restic,拥有 37,333 个 Star。

26
仓库总数
133,156
总星标数
5,121
平均每个仓库星标数
1
restic/restic

快速、安全、高效的备份程序

restic
⭐ 37,333 Go 👤 restic Organization 🕐 已更新 2026-11-19 📅 创建时间 2014-04-27
2
kopia/kopia

适用于 Windows、macOS 和 Linux 的跨平台备份工具,支持快速增量备份、客户端端到端加密、压缩和数据去重。包含 CLI 和 GUI。

kopia
⭐ 14,766 Go 👤 kopia Organization 🕐 已更新 2026-11-20 📅 创建时间 2015-12-19
3
borgbackup/borg

带有压缩和认证加密的去重归档器。

borgbackup
⭐ 13,940 Python 👤 borgbackup Organization 🕐 已更新 2026-11-17 📅 创建时间 2015-05-12
4
prometheus/alertmanager

Prometheus Alertmanager

prometheus
⭐ 8,701 Go 👤 prometheus Organization 🕐 已更新 2026-11-20 📅 创建时间 2013-07-16
5
arsenetar/dupeguru

查找重复文件

arsenetar
⭐ 7,976 Python 👤 arsenetar User 🕐 已更新 2026-11-12 📅 创建时间 2013-06-22
6
gilbertchen/duplicacy

新一代云备份工具

gilbertchen
⭐ 5,707 Go 👤 gilbertchen User 🕐 已更新 2026-11-17 📅 创建时间 2016-02-23
7
togethercomputer/RedPajama-Data

RedPajama-Data 存储库包含用于准备用于训练大型语言模型的大型数据集的代码。

togethercomputer
⭐ 4,997 Python 👤 togethercomputer Organization 🕐 已更新 2026-06-03 📅 创建时间 2023-04-14
8
openvenues/libpostal

一个用于解析/规范化全球街道地址的C语言库。由统计自然语言处理(NLP)和开放地理数据提供支持。

openvenues
⭐ 4,926 C 👤 openvenues Organization 🕐 已更新 2026-05-13 📅 创建时间 2015-03-03
9
windirstat/windirstat

适用于 Windows 的磁盘使用情况分析和清理工具,提供交互式树状图、大文件查找、重复文件检测和文件系统监控功能。

windirstat
⭐ 4,592 C++ 👤 windirstat Organization 🕐 已更新 2026-11-20 📅 创建时间 2016-04-04
10
rustic-rs/rustic

rustic - 快速、加密且支持去重的备份,由 Rust 提供支持

rustic-rs
⭐ 3,441 Rust 👤 rustic-rs Organization 🕐 已更新 2026-11-17 📅 创建时间 2022-03-14
11
Ephemeral-AI-Lab/layerfs

短暂的工作区,持久共享的历史记录。LayerFS 基于共享的已提交历史,为每个智能体提供完整且可写的文件系统工作区,无需复制基础内容。智能体并行工作,将变更提交为去重后的检查点,然后创建分支、回退或合并。通过 LayerFS × DSH 体验一下。

Ephemeral-AI-Lab
⭐ 2,837 Rust 👤 Ephemeral-AI-Lab Organization 🕐 已更新 2026-11-19 📅 创建时间 2026-08-10
12
mhx/dwarfs

适用于 Linux, FreeBSD, macOS 和 Windows 的快速高压缩只读文件系统

mhx
⭐ 2,638 C++ 👤 mhx User 🕐 已更新 2026-11-20 📅 创建时间 2020-11-21
13
moj-analytical-services/splink

快速、准确且可扩展的概率数据链接,支持多个 SQL 后端

moj-analytical-services
⭐ 2,592 Python 👤 moj-analytical-services Organization 🕐 已更新 2026-11-11 📅 创建时间 2019-11-22
14
sahib/rmlint

极快的工具,用于从您的文件系统中移除重复项和其他杂项

sahib
⭐ 2,480 C 👤 sahib User 🕐 已更新 2026-11-12 📅 创建时间 2010-09-27
15
borgmatic-collective/borgmatic

borgmatic 镜像:适用于服务器和工作站的简单、由配置驱动的备份软件

borgmatic-collective
⭐ 2,371 Python 👤 borgmatic-collective Organization 🕐 已更新 2026-11-20 📅 创建时间 2014-11-19
16
PlakarKorp/plakar

plakar 是一个由 Kloset 和 ptar 驱动的备份解决方案

PlakarKorp
⭐ 2,183 Go 👤 PlakarKorp Organization 🕐 已更新 2026-11-20 📅 创建时间 2021-03-19
17
cupcakearmy/autorestic

基于配置的、易用的 restic 备份 CLI。

cupcakearmy
⭐ 1,883 Go 👤 cupcakearmy User 🕐 已更新 2026-04-05 📅 创建时间 2019-06-20
18
NVIDIA-NeMo/Curator

LLM 的可扩展数据预处理和整理工具包

NVIDIA-NeMo
⭐ 1,866 Python 👤 NVIDIA-NeMo Organization 🕐 已更新 2026-11-19 📅 创建时间 2024-03-14
19
karanhudia/borg-ui

用漂亮的Web UI替换复杂的Borg Backup终端命令。只需点击几下即可创建、计划和还原备份。

karanhudia
⭐ 1,692 Python 👤 karanhudia User 🕐 已更新 2026-11-21 📅 创建时间 2025-08-11
20
zinggAI/zingg

面向人类和智能体的大规模 AI 实体解析、身份解析、主数据管理和去重

zinggAI
⭐ 1,275 Java 👤 zinggAI Organization 🕐 已更新 2026-11-03 📅 创建时间 2021-08-25
21
J535D165/recordlinkage

一个用于Python中记录链接和重复检测的强大且模块化的工具包

J535D165
⭐ 1,039 Python 👤 J535D165 User 🕐 已更新 2024-02-21 📅 创建时间 2015-10-18
22
MinishLab/semhash

快速多模态语义去重与过滤

MinishLab
⭐ 979 Python 👤 MinishLab Organization 🕐 已更新 2026-11-11 📅 创建时间 2024-10-13
23
data-prep-kit/data-prep-kit

面向GenAI应用的开源数据准备项目

data-prep-kit
⭐ 968 HTML 👤 data-prep-kit Organization 🕐 已更新 2026-09-29 📅 创建时间 2024-04-08
24
rin-nas/postgresql-patterns-library

PostgreSQL 的现成 SQL 查询集合,用于常见任务(数据获取和修改、查询加速、数据库维护)

rin-nas
⭐ 784 PLpgSQL 👤 rin-nas User 🕐 已更新 2026-11-10 📅 创建时间 2018-12-26
25
Yomguithereal/talisman

简易的模糊匹配、信息检索和用于 JavaScript 的 NLP 构建模块。

Yomguithereal
⭐ 733 JavaScript 👤 Yomguithereal User 🕐 已更新 2026-11-13 📅 创建时间 2016-03-25
26
fcorbelli/zpaqfranz

支持加密的去重归档工具,配备偏执级别的测试。专业备份与灾难恢复管理员的瑞士军刀。勒索软件克星。Windows/Linux/Unix

fcorbelli
⭐ 513 C++ 👤 fcorbelli User 🕐 已更新 2026-11-21 📅 创建时间 2021-01-20

常见问题解答

1

GitHub 上最受欢迎的 #deduplication 仓库是什么?

GitHub 上排名第一的开源 #deduplication 项目是 restic/restic,拥有 37,333 个 Star。快速、安全、高效的备份程序

2

#deduplication 仓库中最常使用的编程语言有哪些?

在 GitHub 上排名靠前的 #deduplication 项目中,最常见的编程语言是 Python, Go, C++, C。

3

#deduplication 仓库的排名是如何计算的?

我们跟踪了 26 个标记为 #deduplication 且拥有 500+ 个 Star 的活跃开源仓库,共计获得 133,156 个 Star,平均每个仓库拥有 5,121 个 Star。排名每日根据 GitHub API 更新。