Git Stars Git Stars

#webcrawler Репозитории

Откройте для себя 6 активных репозиториев с открытым исходным кодом на GitHub, отмеченных тегом #webcrawler, с общим числом 20,820 звёзд (в среднем 3,470 на проект). Лидером этой темы является crawlab-team/crawlab, набравший 12,301 звёзд.

6
Всего репозиториев
20,820
Всего звезд
3,470
Среднее количество звезд на репозиторий
Языки программирования: Python Go PHP

Всего репозиториев: 6

1
crawlab-team/crawlab

Распределенная платформа администрирования веб-краулера для управления пауками независимо от языков и фреймворков. 分布式爬虫管理平台,支持任何语言和框架

crawlab-team
⭐ 12,301 Go 👤 crawlab-team Organization 🕐 Обновлено 2026-02-10 📅 Создано 2019-02-10
2
kingname/GeneralNewsExtractor

Универсальный экстрактор основного текста новостных веб-страниц Бета-версия.

kingname
⭐ 3,807 Python 👤 kingname User 🕐 Обновлено 2026-04-21 📅 Создано 2019-09-08
3
zorlan/skycaiji

Blue Sky Collector — это бесплатная система краулеров с открытым исходным кодом, которая требует только выбора и редактирования правил для сбора данных. Она может работать локально, на виртуальном хостинге или в облачном сервере, и может сканировать практически все типы веб-страниц. Она бесшовно интегрируется с различными программами для создания веб-сайтов на основе CMS, публикует данные в режиме реального времени без входа в систему и полностью автоматизирована без вмешательства человека! Это полностью кроссплатформенная облачная система краулеров для сбора больших данных в Интернете.

zorlan
⭐ 2,098 PHP 👤 zorlan User 🕐 Обновлено 2026-10-07 📅 Создано 2018-02-26
4
spidersuite/SpiderSuite

Релизы, вики и дорожная карта SpiderSuite (веб-сканер безопасности)

spidersuite
⭐ 990 👤 spidersuite Organization 🕐 Обновлено 2026-08-13 📅 Создано 2023-04-05
5
scrapinghub/scrapyrt

HTTP API для пауков Scrapy

scrapinghub
⭐ 884 Python 👤 scrapinghub Organization 🕐 Обновлено 2026-10-13 📅 Создано 2015-01-06
6
z0m31en7/Uscrapper

Uscrapper Vanta: Погрузитесь глубже в интернет с помощью этого мощного инструмента с открытым исходным кодом. Легко и эффективно извлекайте ценные сведения как из источников поверхностного, так и из источников глубокого веба. Расширьте возможности своего майнинга данных и анализа с помощью передовых возможностей Vanta. Быстрый, надежный и удобный в использовании Uscrapper Vanta — лучший выбор для исследователей и аналитиков.

z0m31en7
⭐ 740 Python 👤 z0m31en7 User 🕐 Обновлено 2024-11-24 📅 Создано 2023-05-31

Часто задаваемые вопросы

1

Какой репозиторий по теме #webcrawler наиболее популярен на GitHub?

Самый высоко оценённый проект с открытым исходным кодом по теме #webcrawler на GitHub — crawlab-team/crawlab, набравший 12,301 звёзд. Распределенная платформа администрирования веб-краулера для управления пауками независимо от языков и фреймворков. 分布式爬虫管理平台,支持任何语言和框架

2

Какие языки программирования чаще всего используются в репозиториях по теме #webcrawler?

Среди наиболее высоко оценённых проектов по теме #webcrawler на GitHub чаще всего используются языки программирования Python, Go, PHP.

3

Как рассчитывается рейтинг репозиториев по теме #webcrawler?

Мы отслеживаем 6 активных репозиториев с открытым исходным кодом, отмеченных тегом #webcrawler (500 и более звёзд), с общим числом 20,820 звёзд и в среднем 3,470 звёзд на репозиторий. Рейтинги обновляются ежедневно на основе данных GitHub API.