Git Stars Git Stars

#deduplication Репозитории

Откройте для себя 26 активных репозиториев с открытым исходным кодом на GitHub, отмеченных тегом #deduplication, с общим числом 133,156 звёзд (в среднем 5,121 на проект). Лидером этой темы является restic/restic, набравший 37,333 звёзд.

26
Всего репозиториев
133,156
Всего звезд
5,121
Среднее количество звезд на репозиторий
Языки программирования: Python Go C++ C Rust Java HTML PLpgSQL

Всего репозиториев: 26

1
restic/restic

Быстрая, безопасная и эффективная программа резервного копирования

restic
⭐ 37,333 Go 👤 restic Organization 🕐 Обновлено 2026-11-19 📅 Создано 2014-04-27
2
kopia/kopia

Кроссплатформенный инструмент резервного копирования для Windows, macOS и Linux с быстрыми инкрементальными резервными копиями, сквозным шифрованием на стороне клиента, сжатием и дедупликацией данных. Включены CLI и GUI.

kopia
⭐ 14,766 Go 👤 kopia Organization 🕐 Обновлено 2026-11-20 📅 Создано 2015-12-19
3
borgbackup/borg

Архиватор с дедупликацией, сжатием и аутентифицированным шифрованием.

borgbackup
⭐ 13,940 Python 👤 borgbackup Organization 🕐 Обновлено 2026-11-17 📅 Создано 2015-05-12
4
prometheus/alertmanager

Prometheus Alertmanager

prometheus
⭐ 8,701 Go 👤 prometheus Organization 🕐 Обновлено 2026-11-20 📅 Создано 2013-07-16
5
arsenetar/dupeguru

Найти дублирующиеся файлы

arsenetar
⭐ 7,976 Python 👤 arsenetar User 🕐 Обновлено 2026-11-12 📅 Создано 2013-06-22
6
gilbertchen/duplicacy

Инструмент резервного копирования в облаке нового поколения

gilbertchen
⭐ 5,707 Go 👤 gilbertchen User 🕐 Обновлено 2026-11-17 📅 Создано 2016-02-23
7
togethercomputer/RedPajama-Data

Репозиторий RedPajama-Data содержит код для подготовки больших наборов данных для обучения больших языковых моделей.

togethercomputer
⭐ 4,997 Python 👤 togethercomputer Organization 🕐 Обновлено 2026-06-03 📅 Создано 2023-04-14
8
openvenues/libpostal

Библиотека C для разбора/нормализации уличных адресов по всему миру. Работает на основе статистического НЛП и открытых геоданных.

openvenues
⭐ 4,926 C 👤 openvenues Organization 🕐 Обновлено 2026-05-13 📅 Создано 2015-03-03
9
windirstat/windirstat

Анализатор использования диска и инструмент очистки для Windows с интерактивными древовидными картами, поиском больших файлов, обнаружением дубликатов и мониторингом файловой системы.

windirstat
⭐ 4,592 C++ 👤 windirstat Organization 🕐 Обновлено 2026-11-20 📅 Создано 2016-04-04
10
rustic-rs/rustic

rustic - быстрые, зашифрованные и дедуплицированные резервные копии на базе Rust

rustic-rs
⭐ 3,441 Rust 👤 rustic-rs Organization 🕐 Обновлено 2026-11-17 📅 Создано 2022-03-14
11
Ephemeral-AI-Lab/layerfs

Временные рабочие пространства, долговечная общая история. LayerFS предоставляет каждому агенту полноценное доступное для записи файловое рабочее пространство на основе общей истории коммитов — без копирования исходной базы. Агенты работают параллельно, фиксируют изменения в виде дедуплицированных контрольных точек, а затем создают ветки, возвращаются к предыдущему состоянию или объединяют изменения. Попробуйте LayerFS × DSH.

Ephemeral-AI-Lab
⭐ 2,837 Rust 👤 Ephemeral-AI-Lab Organization 🕐 Обновлено 2026-11-19 📅 Создано 2026-08-10
12
mhx/dwarfs

Быстрая файловая система только для чтения с высоким сжатием для Linux, FreeBSD, macOS и Windows

mhx
⭐ 2,638 C++ 👤 mhx User 🕐 Обновлено 2026-11-20 📅 Создано 2020-11-21
13
moj-analytical-services/splink

Быстрая, точная и масштабируемая вероятностная связь данных с поддержкой нескольких SQL-бэкендов

moj-analytical-services
⭐ 2,592 Python 👤 moj-analytical-services Organization 🕐 Обновлено 2026-11-11 📅 Создано 2019-11-22
14
sahib/rmlint

Крайне быстрый инструмент для удаления дубликатов и другого мусора из вашей файловой системы

sahib
⭐ 2,480 C 👤 sahib User 🕐 Обновлено 2026-11-12 📅 Создано 2010-09-27
15
borgmatic-collective/borgmatic

Зеркало borgmatic: простое программное обеспечение для резервного копирования серверов и рабочих станций, управляемое конфигурацией

borgmatic-collective
⭐ 2,371 Python 👤 borgmatic-collective Organization 🕐 Обновлено 2026-11-20 📅 Создано 2014-11-19
16
PlakarKorp/plakar

plakar — это решение для резервного копирования на базе Kloset и ptar

PlakarKorp
⭐ 2,183 Go 👤 PlakarKorp Organization 🕐 Обновлено 2026-11-20 📅 Создано 2021-03-19
17
cupcakearmy/autorestic

Простой CLI для резервного копирования, управляемый конфигурацией, для restic.

cupcakearmy
⭐ 1,883 Go 👤 cupcakearmy User 🕐 Обновлено 2026-04-05 📅 Создано 2019-06-20
18
NVIDIA-NeMo/Curator

Масштабируемый набор инструментов для предварительной обработки и курирования данных для LLM

NVIDIA-NeMo
⭐ 1,866 Python 👤 NVIDIA-NeMo Organization 🕐 Обновлено 2026-11-19 📅 Создано 2024-03-14
19
karanhudia/borg-ui

Замените сложные команды терминала Borg Backup красивым веб-интерфейсом. Создавайте, планируйте и восстанавливайте резервные копии всего за несколько кликов.

karanhudia
⭐ 1,692 Python 👤 karanhudia User 🕐 Обновлено 2026-11-21 📅 Создано 2025-08-11
20
zinggAI/zingg

Разрешение сущностей и идентификаторов, управление мастер-данными и дедупликация на основе ИИ в масштабах для людей и агентов

zinggAI
⭐ 1,275 Java 👤 zinggAI Organization 🕐 Обновлено 2026-11-03 📅 Создано 2021-08-25
21
J535D165/recordlinkage

Мощный и модульный набор инструментов для связывания записей и обнаружения дубликатов в Python

J535D165
⭐ 1,039 Python 👤 J535D165 User 🕐 Обновлено 2024-02-21 📅 Создано 2015-10-18
22
MinishLab/semhash

Быстрая мультимодальная семантическая дубликация и фильтрация

MinishLab
⭐ 979 Python 👤 MinishLab Organization 🕐 Обновлено 2026-11-11 📅 Создано 2024-10-13
23
data-prep-kit/data-prep-kit

Проект с открытым исходным кодом для подготовки данных для приложений GenAI

data-prep-kit
⭐ 968 HTML 👤 data-prep-kit Organization 🕐 Обновлено 2026-09-29 📅 Создано 2024-04-08
24
rin-nas/postgresql-patterns-library

Коллекция готовых SQL запросов для PostgreSQL по часто возникающим задачам (получение и модификация данных, ускорение запросов, обслуживание БД)

rin-nas
⭐ 784 PLpgSQL 👤 rin-nas User 🕐 Обновлено 2026-11-10 📅 Создано 2018-12-26
25
Yomguithereal/talisman

Простое нечёткое соответствие, извлечение информации и строительные блоки NLP для JavaScript.

Yomguithereal
⭐ 733 JavaScript 👤 Yomguithereal User 🕐 Обновлено 2026-11-13 📅 Создано 2016-03-25
26
fcorbelli/zpaqfranz

Архиватор с дедупликацией и шифрованием, прошедший тестирование на параноидальном уровне. Швейцарский армейский нож для профессионалов в области резервного копирования и аварийного восстановления. Средство нейтрализации программ-вымогателей. Windows/Linux/Unix

fcorbelli
⭐ 513 C++ 👤 fcorbelli User 🕐 Обновлено 2026-11-21 📅 Создано 2021-01-20

Часто задаваемые вопросы

1

Какой репозиторий по теме #deduplication наиболее популярен на GitHub?

Самый высоко оценённый проект с открытым исходным кодом по теме #deduplication на GitHub — restic/restic, набравший 37,333 звёзд. Быстрая, безопасная и эффективная программа резервного копирования

2

Какие языки программирования чаще всего используются в репозиториях по теме #deduplication?

Среди наиболее высоко оценённых проектов по теме #deduplication на GitHub чаще всего используются языки программирования Python, Go, C++, C.

3

Как рассчитывается рейтинг репозиториев по теме #deduplication?

Мы отслеживаем 26 активных репозиториев с открытым исходным кодом, отмеченных тегом #deduplication (500 и более звёзд), с общим числом 133,156 звёзд и в среднем 5,121 звёзд на репозиторий. Рейтинги обновляются ежедневно на основе данных GitHub API.