Git Stars Git Stars

#web-scraping Репозитории

381
Всего репозиториев
2.1M
Всего звезд
5,636
Среднее количество звезд на репозиторий
Языки программирования: Python TypeScript HTML JavaScript Rust CSS PHP

Всего репозиториев: 382

351
samacs/simple_html_dom

Просто форк библиотеки Simple HTML DOM. (http://simplehtmldom.sourceforge.net/)

samacs
⭐ 587 HTML 👤 samacs User 🕐 Обновлено 2024-05-15 📅 Создано 2012-09-23
352
pcrbot/HoshinoBot-plugins-index

Индекс плагинов HoshinoBot

pcrbot
⭐ 581 Python 👤 pcrbot Organization 🕐 Обновлено 2026-11-16 📅 Создано 2020-11-13
354
vakra-dev/reader

Открытая веб‑инфраструктура для ИИ. Скрапинг, краулинг и автоматизация веба, очистка markdown, сессии браузера — всё готово для ваших агентов.

vakra-dev
⭐ 577 TypeScript 👤 vakra-dev Organization 🕐 Обновлено 2026-10-06 📅 Создано 2026-01-07
355
JeremiahPetersen/RepoToText

Преобразуйте весь репозиторий GitHub в один организованный файл .txt для использования с LLM (ChatGPT, Claude, Gemini и т. д.).

JeremiahPetersen
⭐ 576 Python 👤 JeremiahPetersen User 🕐 Обновлено 2024-05-29 📅 Создано 2023-07-09
356
realgam3/pymultitor

PyMultitor - Многопоточный Tor-прокси на Python

realgam3
⭐ 575 Python 👤 realgam3 User 🕐 Обновлено 2025-08-30 📅 Создано 2013-09-28
357
firecrawl/firestarter

🔥 Мгновенно создавайте ИИ-чат-ботов для любого веб-сайта с помощью поиска на основе RAG, потоковой передачи ответов и конечных точек API, совместимых с OpenAI

firecrawl
⭐ 571 TypeScript 👤 firecrawl Organization 🕐 Обновлено 2025-06-18 📅 Создано 2025-06-13
358
jpjacobpadilla/Stealth-Requests

Незаметный веб-скрейпинг и бесшовная обработка HTML на Python!

jpjacobpadilla
⭐ 570 Python 👤 jpjacobpadilla User 🕐 Обновлено 2026-09-19 📅 Создано 2024-08-04
359
alterem/knowledge-grab

knowledge-grab — это настольное приложение, созданное на базе Tauri и Vue 3, предназначенное для удобства пользователей при загрузке различных образовательных ресурсов с Платформы интеллектуального образования для начальных и средних школ (basic.smartedu.cn).

alterem
⭐ 566 Rust 👤 alterem User 🕐 Обновлено 2026-10-21 📅 Создано 2025-05-18
360
sentient-engineering/sentient

Фреймворк/SDK, позволяющий создавать агентов для управления браузером в 3 строки кода. Присоединяйтесь к чату по адресу https://discord.gg/umgnyQU2K8

sentient-engineering
⭐ 565 Python 👤 sentient-engineering Organization 🕐 Обновлено 2024-10-10 📅 Создано 2024-09-01
361
jaebradley/basketball_reference_web_scraper

API статистики NBA через Basketball Reference

jaebradley
⭐ 563 HTML 👤 jaebradley User 🕐 Обновлено 2026-11-21 📅 Создано 2015-10-23
362
programminghistorian/jekyll

Статический сайт на базе Jekyll для The Programming Historian

programminghistorian
⭐ 559 HTML 👤 programminghistorian Organization 🕐 Обновлено 2026-11-19 📅 Создано 2013-09-09
363
databay-labs/free-proxy-list

Список бесплатных прокси ✅🚀 HTTP, HTTPS, SOCKS4 и SOCKS5 | Обновляется каждые 5 минут | Строгий SSL, без MITM, многоканальный

databay-labs
⭐ 557 👤 databay-labs Organization 🕐 Обновлено 2026-06-20 📅 Создано 2025-04-25
364
Johell1NS/browser-search

Навык для ИИ-агентов: поиск в Интернете с SearXNG, просмотр веб-страниц с Camofox, обход защиты с CloakBrowser. Защита от галлюцинаций на уровне архитектуры. Self-hosted, бесплатно, без ограничений.

Johell1NS
⭐ 549 JavaScript 👤 Johell1NS User 🕐 Обновлено 2026-10-22 📅 Создано 2026-06-22
366
strohne/Facepager

Facepager был создан для получения общедоступных данных с YouTube, Twitter и других веб-сайтов на основе API и веб-скрейпинга.

strohne
⭐ 549 Python 👤 strohne User 🕐 Обновлено 2026-05-17 📅 Создано 2012-09-26
367
la-deep-web/Phoneinfoga

скрипт для поиска данных о телефонных номерах

la-deep-web
⭐ 548 Python 👤 la-deep-web Organization 🕐 Обновлено 2024-04-24 📅 Создано 2019-02-24
368
TomoeMami/S1PlainTextBackup

Резервное копирование сообщений S1 в формате простого текста

TomoeMami
⭐ 547 Python 👤 TomoeMami User 🕐 Обновлено 2026-11-21 📅 Создано 2020-02-02
369
AeternaLabsHQ/pullmd

Самостоятельно размещаемый сервис преобразования URL и файлов в Markdown для людей и ИИ-агентов: веб-страницы, документы, изображения, аудио и YouTube. PWA + REST + MCP + навык для Claude Code, поддержка Reddit и обновляемые ссылки для общего доступа.

AeternaLabsHQ
⭐ 528 JavaScript 👤 AeternaLabsHQ Organization 🕐 Обновлено 2026-11-21 📅 Создано 2026-04-27
370
qxinGitHub/searchEngineJump

Скрипт перенаправления поисковых систем, позволяющий удобно переключаться между несколькими движками

qxinGitHub
⭐ 528 JavaScript 👤 qxinGitHub User 🕐 Обновлено 2026-04-19 📅 Создано 2017-02-28
371
Johnserf-Seed/TikTokWeb

TikTokTool Веб-версия

Johnserf-Seed
⭐ 527 CSS 👤 Johnserf-Seed User 🕐 Обновлено 2024-01-26 📅 Создано 2021-07-18
372
luyu0279/BrainyAI

бесплатный плагин боковой панели браузера с открытым исходным кодом, который предлагает бесплатную альтернативу таким продуктам, как Sider, Monica и Merlin.

luyu0279
⭐ 526 TypeScript 👤 luyu0279 User 🕐 Обновлено 2025-04-08 📅 Создано 2024-06-11
373
KitePig/FatRat-Collect

Паншу Цайцзи: Отличный открытый плагин для сбора данных для WordPress

KitePig
⭐ 523 PHP 👤 KitePig User 🕐 Обновлено 2026-06-03 📅 Создано 2018-12-04
374
n1tr00-10/tiktok-web-signature

Реверс-инжиниринг веб-подписей TikTok позволяет создавать действительные подписи TikTok для запросов к API.

n1tr00-10
⭐ 521 Python 👤 n1tr00-10 User 🕐 Обновлено 2026-10-09 📅 Создано 2026-10-09
375
liarjsdev/liarjs-skills

Agent Skills для тестирования браузерного отпечатка: запускайте liarjs из Claude Code, Codex, Cursor или Copilot, чтобы оценить браузер путем сравнения его с самим собой — 40 проверок согласованности Canvas, WebGL, WebGPU, аудио, шрифтов и WebRTC с перекрёстной проверкой на уровне TLS/HTTP. Контроль качества тестовых оболочек Playwright и Puppeteer, блокирование регрессий в CI и триаж обнаружения headless-браузеров.

liarjsdev
⭐ 518 👤 liarjsdev User 🕐 Обновлено 2026-08-06 📅 Создано 2026-08-04
376
subinps/Instagram-Bot

Telegram-бот для скачивания почти всего из Instagram

subinps
⭐ 513 Python 👤 subinps User 🕐 Обновлено 2024-04-30 📅 Создано 2021-05-31
377
oxylabs/quick-start-guide

Краткие руководства по Python, чтобы получить максимальную пользу от бесплатной пробной версии Oxylabs Web Scraper API.

oxylabs
⭐ 512 👤 oxylabs Organization 🕐 Обновлено 2026-06-19 📅 Создано 2022-03-14
379
AlexMathew/scrapple

Фреймворк для создания полуавтоматических экстракторов веб-контента

AlexMathew
⭐ 506 Python 👤 AlexMathew User 🕐 Обновлено 2026-01-16 📅 Создано 2014-12-13
380
oxylabs/web-scraper-api

Универсальный API для веб-скрейпинга и извлечения данных в реальном времени в больших масштабах: прокси, обработка CAPTCHA, рендеринг JavaScript и парсинг в рамках одного запроса с возвратом HTML или структурированного JSON.

oxylabs
⭐ 503 👤 oxylabs Organization 🕐 Обновлено 2026-10-01 📅 Создано 2026-06-05
381
sansan0/bilibili-comment-analyzer

🎯 Программа визуализации и анализа данных комментариев Bilibili -- создатели контента могут использовать её для выбора тем и понимания своей аудитории.

sansan0
⭐ 503 Python 👤 sansan0 User 🕐 Обновлено 2025-06-27 📅 Создано 2025-06-03