Git Stars Git Stars

#crawlers Репозитории

Откройте для себя 3 активных репозиториев с открытым исходным кодом на GitHub, отмеченных тегом #crawlers, с общим числом 6,067 звёзд (в среднем 2,022 на проект). Лидером этой темы является ai-robots-txt/ai.robots.txt, набравший 4,265 звёзд.

3
Всего репозиториев
6,067
Всего звезд
2,022
Среднее количество звезд на репозиторий
Языки программирования: Python TypeScript JavaScript

Всего репозиториев: 3

1
ai-robots-txt/ai.robots.txt

Список ИИ-агентов и роботов для блокировки.

ai-robots-txt
⭐ 4,265 Python 👤 ai-robots-txt Organization 🕐 Обновлено 2026-11-16 📅 Создано 2024-03-27
2
omrilotan/isbot

🤖/👨‍🦰 Обнаружение ботов/краулеров/пауков с использованием строки user agent

omrilotan
⭐ 1,168 TypeScript 👤 omrilotan User 🕐 Обновлено 2026-11-17 📅 Создано 2015-07-24
3
scrapfly/Antibot-Detector

Обнаружение антибот-систем, капч и методов снятия отпечатков в реальном времени. Идентифицирует Cloudflare, Akamai, DataDome, reCAPTCHA, hCaptcha, Shape Security и другие системы, предоставляя оценку достоверности и расширенные инструменты захвата.

scrapfly
⭐ 636 JavaScript 👤 scrapfly Organization 🕐 Обновлено 2026-11-17 📅 Создано 2025-09-03

Часто задаваемые вопросы

1

Какой репозиторий по теме #crawlers наиболее популярен на GitHub?

Самый высоко оценённый проект с открытым исходным кодом по теме #crawlers на GitHub — ai-robots-txt/ai.robots.txt, набравший 4,265 звёзд. Список ИИ-агентов и роботов для блокировки.

2

Какие языки программирования чаще всего используются в репозиториях по теме #crawlers?

Среди наиболее высоко оценённых проектов по теме #crawlers на GitHub чаще всего используются языки программирования Python, TypeScript, JavaScript.

3

Как рассчитывается рейтинг репозиториев по теме #crawlers?

Мы отслеживаем 3 активных репозиториев с открытым исходным кодом, отмеченных тегом #crawlers (500 и более звёзд), с общим числом 6,067 звёзд и в среднем 2,022 звёзд на репозиторий. Рейтинги обновляются ежедневно на основе данных GitHub API.