#robots-txt Репозитории
Откройте для себя 7 активных репозиториев с открытым исходным кодом на GitHub, отмеченных тегом #robots-txt, с общим числом 10,665 звёзд (в среднем 1,523 на проект). Лидером этой темы является google/robotstxt, набравший 3,478 звёзд.
Всего репозиториев: 7
Репозиторий содержит парсер и сопоставитель robots.txt от Google в виде библиотеки C++ (соответствующей C++11).
Подборка материалов по SEO, GEO и поиску с помощью ИИ — техническое SEO, обнаруживаемость для агентов, аналитика и монетизация трафика.
Самый большой каталог документации и инструментов, готовых к работе с ИИ, реализующих предлагаемый стандарт llms.txt
Открытый инструмент для аудита SEO и GEO: CLI без зависимостей (npx), навык агента для Claude Code, Cursor, Codex, Gemini и Copilot, 47 SEO-промптов и база знаний о поиске Google/Bing/ИИ со ссылками на источники. Проверяет robots.txt, карты сайта, канонические URL, hreflang, структурированные данные, Core Web Vitals и ИИ-краулеры — и исправляет найденные проблемы.
Часто задаваемые вопросы
Какой репозиторий по теме #robots-txt наиболее популярен на GitHub?
Самый высоко оценённый проект с открытым исходным кодом по теме #robots-txt на GitHub — google/robotstxt, набравший 3,478 звёзд. Репозиторий содержит парсер и сопоставитель robots.txt от Google в виде библиотеки C++ (соответствующей C++11).
Какие языки программирования чаще всего используются в репозиториях по теме #robots-txt?
Среди наиболее высоко оценённых проектов по теме #robots-txt на GitHub чаще всего используются языки программирования Python, TypeScript, C++, JavaScript.
Как рассчитывается рейтинг репозиториев по теме #robots-txt?
Мы отслеживаем 7 активных репозиториев с открытым исходным кодом, отмеченных тегом #robots-txt (500 и более звёзд), с общим числом 10,665 звёзд и в среднем 1,523 звёзд на репозиторий. Рейтинги обновляются ежедневно на основе данных GitHub API.