#deduplication Репозитории
Откройте для себя 26 активных репозиториев с открытым исходным кодом на GitHub, отмеченных тегом #deduplication, с общим числом 133,156 звёзд (в среднем 5,121 на проект). Лидером этой темы является restic/restic, набравший 37,333 звёзд.
Всего репозиториев: 26
Кроссплатформенный инструмент резервного копирования для Windows, macOS и Linux с быстрыми инкрементальными резервными копиями, сквозным шифрованием на стороне клиента, сжатием и дедупликацией данных. Включены CLI и GUI.
Репозиторий RedPajama-Data содержит код для подготовки больших наборов данных для обучения больших языковых моделей.
Библиотека C для разбора/нормализации уличных адресов по всему миру. Работает на основе статистического НЛП и открытых геоданных.
Анализатор использования диска и инструмент очистки для Windows с интерактивными древовидными картами, поиском больших файлов, обнаружением дубликатов и мониторингом файловой системы.
rustic - быстрые, зашифрованные и дедуплицированные резервные копии на базе Rust
Временные рабочие пространства, долговечная общая история. LayerFS предоставляет каждому агенту полноценное доступное для записи файловое рабочее пространство на основе общей истории коммитов — без копирования исходной базы. Агенты работают параллельно, фиксируют изменения в виде дедуплицированных контрольных точек, а затем создают ветки, возвращаются к предыдущему состоянию или объединяют изменения. Попробуйте LayerFS × DSH.
Быстрая файловая система только для чтения с высоким сжатием для Linux, FreeBSD, macOS и Windows
Быстрая, точная и масштабируемая вероятностная связь данных с поддержкой нескольких SQL-бэкендов
Крайне быстрый инструмент для удаления дубликатов и другого мусора из вашей файловой системы
Зеркало borgmatic: простое программное обеспечение для резервного копирования серверов и рабочих станций, управляемое конфигурацией
Простой CLI для резервного копирования, управляемый конфигурацией, для restic.
Масштабируемый набор инструментов для предварительной обработки и курирования данных для LLM
Замените сложные команды терминала Borg Backup красивым веб-интерфейсом. Создавайте, планируйте и восстанавливайте резервные копии всего за несколько кликов.
Разрешение сущностей и идентификаторов, управление мастер-данными и дедупликация на основе ИИ в масштабах для людей и агентов
Мощный и модульный набор инструментов для связывания записей и обнаружения дубликатов в Python
Проект с открытым исходным кодом для подготовки данных для приложений GenAI
Коллекция готовых SQL запросов для PostgreSQL по часто возникающим задачам (получение и модификация данных, ускорение запросов, обслуживание БД)
Простое нечёткое соответствие, извлечение информации и строительные блоки NLP для JavaScript.
Архиватор с дедупликацией и шифрованием, прошедший тестирование на параноидальном уровне. Швейцарский армейский нож для профессионалов в области резервного копирования и аварийного восстановления. Средство нейтрализации программ-вымогателей. Windows/Linux/Unix
Часто задаваемые вопросы
Какой репозиторий по теме #deduplication наиболее популярен на GitHub?
Самый высоко оценённый проект с открытым исходным кодом по теме #deduplication на GitHub — restic/restic, набравший 37,333 звёзд. Быстрая, безопасная и эффективная программа резервного копирования
Какие языки программирования чаще всего используются в репозиториях по теме #deduplication?
Среди наиболее высоко оценённых проектов по теме #deduplication на GitHub чаще всего используются языки программирования Python, Go, C++, C.
Как рассчитывается рейтинг репозиториев по теме #deduplication?
Мы отслеживаем 26 активных репозиториев с открытым исходным кодом, отмеченных тегом #deduplication (500 и более звёзд), с общим числом 133,156 звёзд и в среднем 5,121 звёзд на репозиторий. Рейтинги обновляются ежедневно на основе данных GitHub API.