Git Stars Git Stars

#data-deduplication Repositories

Entdecke 10 aktive Open-Source-GitHub-Repositories, die mit #data-deduplication getaggt sind und insgesamt 20,707 Sterne gesammelt haben (durchschnittlich 2,070 Sterne pro Projekt). Spitzenreiter in diesem Themenbereich ist bup/bup mit 7,369 Sternen.

10
Gesamtzahl der Repositories
20,707
Gesamtanzahl der Sterne
2,070
Durchschnittliche Sterne/Repo
Programmiersprachen: Python C Go C#

Insgesamt 10 Repositories

1
bup/bup

Sehr effizientes Backup-System basierend auf dem Git-Packfile-Format, das schnelle inkrementelle Speicherungen und globale Deduplizierung (zwischen und innerhalb von Dateien, einschließlich Virtual-Machine-Images) bietet. Bitte posten Sie Probleme oder Patches in die Mailingliste zur Diskussion (siehe Ende der README unten).

bup
⭐ 7,369 Python 👤 bup Organization 🕐 Aktualisiert 2026-11-19 📅 Erstellt 2012-09-03
2
huggingface/datatrove

Befreien der Datenverarbeitung von Skript-Wahnsinn durch die Bereitstellung einer Reihe von plattformunabhängigen, anpassbaren Pipeline-Verarbeitungsblöcken.

huggingface
⭐ 3,428 Python 👤 huggingface Organization 🕐 Aktualisiert 2026-11-18 📅 Erstellt 2023-06-14
3
adrianlopezroche/fdupes

FDUPES ist ein Programm zur Identifizierung oder Löschung von doppelten Dateien in angegebenen Verzeichnissen.

adrianlopezroche
⭐ 3,039 C 👤 adrianlopezroche User 🕐 Aktualisiert 2026-04-14 📅 Erstellt 2014-05-15
4
tomnomnom/anew

Ein Tool zum Hinzufügen neuer Zeilen zu Dateien, wobei Duplikate übersprungen werden

tomnomnom
⭐ 1,599 Go 👤 tomnomnom User 🕐 Aktualisiert 2024-01-12 📅 Erstellt 2019-04-02
5
s3ql/s3ql

Ein vollständiges Dateisystem für die Online-Datenspeicherung

s3ql
⭐ 1,282 Python 👤 s3ql Organization 🕐 Aktualisiert 2026-11-20 📅 Erstellt 2015-07-12
6
Tarsnap/tarsnap

Command-Line-Client-Code für Tarsnap.

Tarsnap
⭐ 961 C 👤 Tarsnap Organization 🕐 Aktualisiert 2026-11-12 📅 Erstellt 2015-05-18
7
OpenDataBox/awesome-data-llm

Offizielles Repository des "LLM × DATA"-Umfragepapiers

OpenDataBox
⭐ 836 👤 OpenDataBox Organization 🕐 Aktualisiert 2026-10-25 📅 Erstellt 2024-08-04
8
ssdeep-project/ssdeep

Fuzzy-Hashing-API und Fuzzy-Hashing-Tool

ssdeep-project
⭐ 804 C 👤 ssdeep-project Organization 🕐 Aktualisiert 2026-08-13 📅 Erstellt 2017-06-05
9
JakeBayer/FuzzySharp

Implementierung des Fuzzy-String-Matchings des bekannten Python-FuzzyWuzzy-Algorithmus von Seat Geek in C# .NET.

JakeBayer
⭐ 776 C# 👤 JakeBayer User 🕐 Aktualisiert 2024-08-20 📅 Erstellt 2018-04-10
10
anhaidgroup/deepmatcher

Python-Paket zur Durchführung von Entity- und Text-Matching mit Deep Learning.

anhaidgroup
⭐ 613 Python 👤 anhaidgroup User 🕐 Aktualisiert 2024-06-18 📅 Erstellt 2017-12-01

Häufig gestellte Fragen

1

Welches ist das beliebteste #data-deduplication-Repository auf GitHub?

Das am höchsten eingestufte Open-Source-#data-deduplication-Projekt auf GitHub ist bup/bup mit 7,369 Sternen. Sehr effizientes Backup-System basierend auf dem Git-Packfile-Format, das schnelle inkrementelle Speicherungen und globale Deduplizierung (zwischen und innerhalb von Dateien, einschließlich Virtual-Machine-Images) bietet. Bitte posten Sie Probleme oder Patches in die Mailingliste zur Diskussion (siehe Ende der README unten).

2

Welche Programmiersprachen werden in #data-deduplication-Repositories am häufigsten verwendet?

Unter den am höchsten eingestuften #data-deduplication-Projekten auf GitHub sind Python, C, Go, C# die am häufigsten verwendeten Programmiersprachen.

3

Wie wird das Ranking der #data-deduplication-Repositories berechnet?

Wir verfolgen 10 aktive Open-Source-Repositories, die mit #data-deduplication getaggt sind (500+ Sterne), mit insgesamt 20,707 Sternen und durchschnittlich 2,070 Sternen pro Repository. Die Rankings werden täglich über die GitHub-API aktualisiert.