#change-data-capture Репозитории
Откройте для себя 25 активных репозиториев с открытым исходным кодом на GitHub, отмеченных тегом #change-data-capture, с общим числом 160,531 звёзд (в среднем 6,421 на проект). Лидером этой темы является alibaba/canal, набравший 29,747 звёзд.
Всего репозиториев: 25
Открытый исходный код для перемещения данных в ELT-пайплайнах и AI-агентах — из API, баз данных и файлов в хранилища данных, озёра данных и AI-приложения. Как в self-hosted, так и в облаке.
Захват измененных данных для различных баз данных. Пожалуйста, сообщайте о проблемах на https://github.com/debezium/dbz/issues.
Инкрементальный движок для агентов с долгим горизонтом 🌟 Поставь звезду, если нравится!
SeaTunnel — это мультимодальный, высокопроизводительный, распределённый инструмент интеграции больших данных.
Система синхронизации распределенных баз данных Alibaba (решает проблемы межконтинентальных дата-центров Китай-США)
Как уменьшить сложность и ускорить работу? Просто используйте Postgres для всего.
Захват изменений данных Postgres в потоки, очереди и поисковые индексы, такие как Kafka, SQS, Elasticsearch, HTTP-эндпоинты и многое другое
OLake Go: система репликации с открытым исходным кодом для передачи данных из баз данных, Kafka и S3 в Apache Iceberg и Parquet. Источники: Postgres, MySQL, MongoDB, Oracle, MSSQL, DB2, Kafka, S3. Ранее — datazip-inc/olake. Обслуживание таблиц находится в datazip-inc/olake-fusion.
Примеры запуска Debezium (конфигурация, файлы Docker Compose и т. д.). Сообщайте о проблемах по адресу https://github.com/debezium/dbz/issues.
Копирование базы данных Postgres на целевой сервер Postgres (pg_dump | pg_restore на стероидах)
🌊 Непрерывно синхронизируйте системы, в которых находятся ваши данные, с системами, в которых вы _хотите_ их видеть, управляя потоками данных с помощью Estuary. 🌊
Расширяемая распределённая система для надёжного потокового переноса данных nearline в масштабе
Компоненты инкрементальной подписки и потребления binlog базы данных MySQL Alibaba, клиент Golang Canal[Компоненты инкрементальной подписки и потребления binlog базы данных MySQL Alibaba, клиент Go Canal] https://github.com/alibaba/canal
DBSyncer (сокращенно dbs) — это промежуточное ПО с открытым исходным кодом для синхронизации данных, предоставляющее сценарии синхронизации для MySQL, Oracle, SQL Server, PostgreSQL, Elasticsearch (ES), Kafka, File, SQL и других. Он поддерживает загрузку плагинов для настройки бизнес-процессов преобразования синхронизации и предоставляет графики для мониторинга полных и инкрементных статистических данных, а также предупреждения о производительности приложений.
SymmetricDS — это программное обеспечение для репликации баз данных и синхронизации файлов, которое является платформо-независимым, поддерживаемым вебом и независимым от базы данных. Оно предназначено для того, чтобы сделать двунаправленную репликацию данных быстрой, простой и устойчивой. Оно масштабируется на большое количество узлов и работает в почти реальном времени через сети WAN и LAN.
Платформа репликации баз данных, использующая перехват изменений данных. Потоковая передача производственных данных из баз данных в ваше хранилище данных (Snowflake, BigQuery, Redshift, Databricks) в режиме реального времени.
Версия Eventuate для локальной установки с открытым исходным кодом, которая является платформой для разработки транзакционных бизнес-приложений, использующих архитектуру микросервисов.
Часто задаваемые вопросы
Какой репозиторий по теме #change-data-capture наиболее популярен на GitHub?
Самый высоко оценённый проект с открытым исходным кодом по теме #change-data-capture на GitHub — alibaba/canal, набравший 29,747 звёзд. Компонент инкрементной подписки и потребления binlog MySQL Alibaba
Какие языки программирования чаще всего используются в репозиториях по теме #change-data-capture?
Среди наиболее высоко оценённых проектов по теме #change-data-capture на GitHub чаще всего используются языки программирования Java, Python, Go, Rust.
Как рассчитывается рейтинг репозиториев по теме #change-data-capture?
Мы отслеживаем 25 активных репозиториев с открытым исходным кодом, отмеченных тегом #change-data-capture (500 и более звёзд), с общим числом 160,531 звёзд и в среднем 6,421 звёзд на репозиторий. Рейтинги обновляются ежедневно на основе данных GitHub API.