Git Stars Git Stars

#data-deduplication Dépôts

Découvrez 10 dépôts GitHub open source actifs associés à #data-deduplication, cumulant 20,707 étoiles au total (soit une moyenne de 2,070 étoiles par projet). Le projet en tête de ce thème est bup/bup, avec 7,369 étoiles.

10
Total des Dépôts
20,707
Nombre total d'étoiles
2,070
Moyenne d'Étoiles/Dépôt
Langages de programmation: Python C Go C#
1
bup/bup

Système de sauvegarde très efficace basé sur le format git packfile, offrant des sauvegardes incrémentielles rapides et une déduplication globale (entre et au sein des fichiers, y compris les images de machines virtuelles). Veuillez poster les problèmes ou les correctifs sur la liste de diffusion pour discussion (voir la fin du README ci-dessous).

bup
⭐ 7,369 Python 👤 bup Organization 🕐 Mis à jour 2026-11-19 📅 Créé 2012-09-03
2
huggingface/datatrove

Libérer le traitement des données de la folie des scripts en fournissant un ensemble de blocs de traitement de pipeline personnalisables et indépendants de la plateforme.

huggingface
⭐ 3,428 Python 👤 huggingface Organization 🕐 Mis à jour 2026-11-18 📅 Créé 2023-06-14
3
adrianlopezroche/fdupes

FDUPES est un programme permettant d'identifier ou de supprimer les fichiers en double résidant dans des répertoires spécifiés.

adrianlopezroche
⭐ 3,039 C 👤 adrianlopezroche User 🕐 Mis à jour 2026-04-14 📅 Créé 2014-05-15
4
tomnomnom/anew

Un outil pour ajouter de nouvelles lignes aux fichiers, en ignorant les doublons

tomnomnom
⭐ 1,599 Go 👤 tomnomnom User 🕐 Mis à jour 2024-01-12 📅 Créé 2019-04-02
5
s3ql/s3ql

Un système de fichiers complet pour le stockage de données en ligne

s3ql
⭐ 1,282 Python 👤 s3ql Organization 🕐 Mis à jour 2026-11-20 📅 Créé 2015-07-12
6
Tarsnap/tarsnap

Code client en ligne de commande pour Tarsnap.

Tarsnap
⭐ 961 C 👤 Tarsnap Organization 🕐 Mis à jour 2026-11-12 📅 Créé 2015-05-18
7
OpenDataBox/awesome-data-llm

Référentiel officiel de l'article d'enquête "LLM × DATA"

OpenDataBox
⭐ 836 👤 OpenDataBox Organization 🕐 Mis à jour 2026-10-25 📅 Créé 2024-08-04
8
ssdeep-project/ssdeep

API de hachage flou et outil de hachage flou

ssdeep-project
⭐ 804 C 👤 ssdeep-project Organization 🕐 Mis à jour 2026-08-13 📅 Créé 2017-06-05
9
JakeBayer/FuzzySharp

Implémentation en C# .NET de la correspondance de chaînes floues de l'algorithme Python FuzzyWuzzy bien connu de Seat Geek.

JakeBayer
⭐ 776 C# 👤 JakeBayer User 🕐 Mis à jour 2024-08-20 📅 Créé 2018-04-10
10
anhaidgroup/deepmatcher

Paquet Python pour effectuer la correspondance d'entités et de texte en utilisant l'apprentissage profond.

anhaidgroup
⭐ 613 Python 👤 anhaidgroup User 🕐 Mis à jour 2024-06-18 📅 Créé 2017-12-01

Foire aux questions

1

Quel est le dépôt #data-deduplication le plus populaire sur GitHub ?

Le projet #data-deduplication open source le mieux classé sur GitHub est bup/bup, avec 7,369 étoiles. Système de sauvegarde très efficace basé sur le format git packfile, offrant des sauvegardes incrémentielles rapides et une déduplication globale (entre et au sein des fichiers, y compris les images de machines virtuelles). Veuillez poster les problèmes ou les correctifs sur la liste de diffusion pour discussion (voir la fin du README ci-dessous).

2

Quels langages de programmation sont les plus utilisés dans les dépôts #data-deduplication ?

Parmi les projets #data-deduplication les mieux classés sur GitHub, les langages de programmation les plus courants sont Python, C, Go, C#.

3

Comment le classement des dépôts #data-deduplication est-il calculé ?

Nous suivons 10 dépôts open source actifs associés à #data-deduplication (500+ étoiles), totalisant 20,707 étoiles, avec une moyenne de 2,070 étoiles par dépôt. Les classements sont mis à jour quotidiennement à partir de l’API GitHub.