Git Stars Git Stars

#web-scraping Репозитории

381
Всего репозиториев
2.1M
Всего звезд
5,636
Среднее количество звезд на репозиторий

Всего репозиториев: 382

101
jerry3747/taobao_seckill

Taobao, Tmall, распродажа за полцены, выхвати телевизор, выхвати Маотай, уничтожим спекулянтов

jerry3747
⭐ 2,667 Python 👤 jerry3747 User 🕐 Обновлено 2024-07-12 📅 Создано 2020-12-29
102
Predidit/KazumiRules

Репозиторий хостинга правил Kazumi, приветствуются вклады ^•ﻌ•^

Predidit
⭐ 2,653 Dart 👤 Predidit User 🕐 Обновлено 2026-11-13 📅 Создано 2024-05-22
103
Anning01/AIMedia

AIMedia — это интегрированное программное обеспечение, которое автоматически собирает горячие темы, создает статьи с помощью ИИ и автоматически публикует их. Поддерживает Toutiao, Xiaohongshu, официальные аккаунты WeChat и другие.

Anning01
⭐ 2,619 TypeScript 👤 Anning01 User 🕐 Обновлено 2026-11-04 📅 Создано 2024-10-28
104
oss-invisible/playwright

Невидимый Playwright: Playwright, который не могут обнаружить антибот-системы, поэтому никаких капч: тот же API, скрытый headless Firefox с защитой от обнаружения, незаметный цифровой отпечаток, обход обнаружения ботов, веб-скрейпинг и автоматизация браузера на Python.

oss-invisible
⭐ 2,612 Python 👤 oss-invisible Organization 🕐 Обновлено 2026-11-21 📅 Создано 2026-05-13
105
Mahanaicoach/google-maps-scraper-kit

Бесплатный скрейпер Google Maps с открытым исходным кодом для поиска потенциальных клиентов (Python, без API-ключа и Docker). Экспортирует в CSV названия, телефоны, адреса электронной почты, сайты, рейтинги и ссылки на Instagram/Facebook/LinkedIn/TikTok/YouTube/X. 100 мест с адресами электронной почты за 44 с; параметр --grid позволяет обойти ограничение Google в 120 результатов. Проверка MX-записей электронной почты и обнаружение рекламных пикселей. Навык для Claude Code, Codex и Cursor.

Mahanaicoach
⭐ 2,567 Python 👤 Mahanaicoach User 🕐 Обновлено 2026-11-19 📅 Создано 2026-06-21
106
lorien/grab

Фреймворк для веб-скрейпинга

lorien
⭐ 2,461 Python 👤 lorien User 🕐 Обновлено 2025-09-19 📅 Создано 2013-05-01
107
openbullet/OpenBullet2

OpenBullet заново изобретён

openbullet
⭐ 2,447 C# 👤 openbullet User 🕐 Обновлено 2026-09-07 📅 Создано 2020-04-23
108
0xMassi/webclaw

Быстрая локальная веб-экстракция контента для LLM. Скрапинг, краулинг, извлечение структурированных данных — всё на Rust. CLI, REST API и сервер MCP.

0xMassi
⭐ 2,440 Rust 👤 0xMassi User 🕐 Обновлено 2026-11-21 📅 Создано 2026-03-10
109
paquettg/php-html-parser

HTML DOM парсер. Позволяет манипулировать HTML. Находите теги на HTML-странице с помощью селекторов, как в jQuery.

paquettg
⭐ 2,405 HTML 👤 paquettg User 🕐 Обновлено 2024-08-09 📅 Создано 2013-12-13
110
drunkdream/weread-exporter

Экспортировать книги из WeChat Reading в форматы epub, pdf, mobi и т.д.

drunkdream
⭐ 2,403 Python 👤 drunkdream User 🕐 Обновлено 2026-03-21 📅 Создано 2023-02-11
111
saifyxpro/HeadlessX

Платформа автоматизации браузера, развернутая локально и не обнаруживаемая. Работает на Camoufox (Firefox) для 0 % вероятности обнаружения. Создана для скорости, приватности и масштабируемости.

saifyxpro
⭐ 2,365 TypeScript 👤 saifyxpro User 🕐 Обновлено 2026-11-12 📅 Создано 2025-09-12
112
jxhczhl/JsRpc

Вызов браузерных методов RPC (удаленный вызов процедур), избегая ручного написания кода и настройки окружения

jxhczhl
⭐ 2,352 Go 👤 jxhczhl User 🕐 Обновлено 2026-06-08 📅 Создано 2021-09-25
113
codingforentrepreneurs/30-Days-of-Python

Изучите Python в течение следующих 30 (или около того) дней.

codingforentrepreneurs
⭐ 2,232 HTML 👤 codingforentrepreneurs User 🕐 Обновлено 2024-02-27 📅 Создано 2016-03-09
114
chao325/MaoTai_GUIT

Tmall TaoBao iМаотай iMatoTai JD Цзиндун молниеносная покупка, Цзиндун Маотай молниеносная покупка версия Windows, готов к использованию из коробки без настройки окружения. Разработка на подходе (открытый протокол использует Apache License)

chao325
⭐ 2,147 Python 👤 chao325 User 🕐 Обновлено 2026-11-12 📅 Создано 2023-09-20
115
btahir/open-deep-research

Альтернатива Gemini Deep Research с открытым исходным кодом. Создавайте отчеты с помощью ИИ на основе результатов поиска.

btahir
⭐ 2,141 TypeScript 👤 btahir User 🕐 Обновлено 2025-12-15 📅 Создано 2024-12-24
116
ThePhaseless/Byparr

Получите свои действительные антибот-куки самостоятельно!

ThePhaseless
⭐ 2,117 Python 👤 ThePhaseless User 🕐 Обновлено 2026-11-19 📅 Создано 2024-07-24
117
oxylabs/how-to-scrape-google-scholar

Руководство по извлечению заголовков, авторов и цитат из Google Scholar с использованием Python и API Oxylabs SERP Scraper.

oxylabs
⭐ 2,095 Python 👤 oxylabs Organization 🕐 Обновлено 2026-11-18 📅 Создано 2024-03-07
118
oxylabs/how-to-scrape-amazon-prices

Код для извлечения самых продаваемых товаров, результатов поиска и доступных в настоящее время предложений с Amazon с использованием Python и API Oxylabs E-Commerce Scraper.

oxylabs
⭐ 2,083 Python 👤 oxylabs Organization 🕐 Обновлено 2026-11-18 📅 Создано 2024-03-21
119
ssili126/tv

Автоматически собранные прямые эфиры IPTV на базе IPv4 для гостиничных телевизоров, автоматическое тестирование скорости воспроизведения, ежедневное автоматическое обновление. Включает национальные и спутниковые каналы CCTV, а также некоторые местные каналы, обеспечивая плавное воспроизведение. Может быть запущен в OpenWrt или Docker Synology.

ssili126
⭐ 2,052 Python 👤 ssili126 User 🕐 Обновлено 2026-11-04 📅 Создано 2024-01-12
120
supermemoryai/markdowner

Быстрый инструмент для преобразования любого веб-сайта в готовые для LLM данные в формате Markdown. Создано https://supermemory.ai

supermemoryai
⭐ 2,033 TypeScript 👤 supermemoryai Organization 🕐 Обновлено 2026-10-02 📅 Создано 2024-05-09
121
midudev/curso-python

Курс Python с нуля для всех желающих с упражнениями

midudev
⭐ 2,006 Python 👤 midudev User 🕐 Обновлено 2026-10-16 📅 Создано 2025-01-15
122
zhegexiaohuozi/SeimiCrawler

Простая, гибкая, распределенная Java-библиотека для сканирования с поддержкой SpringBoot; Гибкая, распределенная библиотека для сканирования.

zhegexiaohuozi
⭐ 1,984 Java 👤 zhegexiaohuozi User 🕐 Обновлено 2026-11-17 📅 Создано 2015-11-06
123
KEV0143/Parser-Chitai-Gorod

Интеллектуальный парсер для каталога «Читай-город». Высокоскоростной сбор и структурирование данных по любым заданным параметрам: от ISBN до динамики скидок.

KEV0143
⭐ 1,979 Python 👤 KEV0143 User 🕐 Обновлено 2026-09-17 📅 Создано 2025-05-18
124
bogdanfinn/tls-client

net/http.Client, аналогичный HTTP Client, с опциями для выбора конкретных TLS-отпечатков клиента для использования в запросах.

bogdanfinn
⭐ 1,949 Go 👤 bogdanfinn User 🕐 Обновлено 2026-11-18 📅 Создано 2022-07-09
125
stevenyomi/copymanga

Расширение CopyManga для Tachiyomi.

stevenyomi
⭐ 1,941 👤 stevenyomi User 🕐 Обновлено 2024-02-18 📅 Создано 2022-06-30
126
nat/natbot

Управляйте браузером с помощью GPT-3

nat
⭐ 1,933 Python 👤 nat User 🕐 Обновлено 2024-06-09 📅 Создано 2022-09-29
127
ARC-MX/sgcc_electricity_new

HomeAssistant Запрос тарифа на электроэнергию от национальной сети

ARC-MX
⭐ 1,925 Python 👤 ARC-MX User 🕐 Обновлено 2026-11-07 📅 Создано 2024-05-08
128
bugswriter/notflix

Notflix - это скрипт оболочки для поиска и потоковой передачи торрентов.

bugswriter
⭐ 1,913 Shell 👤 bugswriter User 🕐 Обновлено 2024-06-18 📅 Создано 2022-01-01
129
saermart/DouyinLiveWebFetcher

Скрипт для сбора данных сообщений Danmaku в веб-версии прямых трансляций Douyin (последняя версия 2025 года)

saermart
⭐ 1,909 Python 👤 saermart User 🕐 Обновлено 2026-09-08 📅 Создано 2024-01-02
⭐ 1,894 Python 👤 LawRefBook Organization 🕐 Обновлено 2026-11-18 📅 Создано 2022-03-21
131
Freedium-cfd/web

ЭТОТ РЕПОЗИТОРИЙ - ПРОСТО ЗЕРКАЛО! Основной репозиторий для разработки находится по адресу https://codeberg.org/Freedium-cfd/web

Freedium-cfd
⭐ 1,885 Python 👤 Freedium-cfd Organization 🕐 Обновлено 2026-10-20 📅 Создано 2023-08-21
132
enetx/surf

SURF - Расширенный HTTP-клиент Go с имитацией браузеров Chrome/Firefox, HTTP/3 с отпечатками QUIC, эмуляцией TLS JA3/JA4 и обходом защиты от ботов для веб-автоматизации и скрапинга.

enetx
⭐ 1,853 Go 👤 enetx User 🕐 Обновлено 2026-11-15 📅 Создано 2025-08-30
133
microlinkhq/browserless

Независимый драйвер Headless Chrome/Chromium над Puppeteer. Делайте скриншоты, генерируйте PDF, извлекайте текст и HTML через API, готовый к продакшн использованию.

microlinkhq
⭐ 1,846 JavaScript 👤 microlinkhq Organization 🕐 Обновлено 2026-11-20 📅 Создано 2017-09-06
134
tkfy920/qstock

qstock разработан публичным аккаунтом «Python Financial Quant» с целью создания персонального пакета для количественного анализа инвестиционных исследований, который в настоящее время включает модули для получения данных (data), визуализации (plot), выбора акций (stock) и количественного бэктестинга (strategy backtest). qstock предоставит пользователям лаконичный интерфейс данных и нормализованные данные финансового рынка. Модуль визуализации предоставляет пользователям простой интерфейс для интерактивной графики на основе веб-технологий; модуль выбора акций предоставляет данные выбора акций от Tonghuashun и пользовательский выбор акций, включая RPS, тренд MM, финансовые индикаторы, модель денежных потоков и т. д.; модуль бэктестинга предоставляет всем векторизованный (на основе pandas) и событийно-ориентированный базовый фреймворк и модель. Подписывайтесь на публичный аккаунт WeChat «Python Financial Quant», чтобы получить больше информации о приложениях.

tkfy920
⭐ 1,839 Python 👤 tkfy920 User 🕐 Обновлено 2025-03-16 📅 Создано 2022-10-10
135
deweizhu/bookget

bookget Инструмент для загрузки цифровых древних книг.

deweizhu
⭐ 1,824 Go 👤 deweizhu User 🕐 Обновлено 2026-01-23 📅 Создано 2023-04-09
136
kickscondor/fraidycat

Подписывайтесь на блоги, вики, каналы YouTube, а также аккаунты в Twitter, Instagram и т.д. с одной страницы.

kickscondor
⭐ 1,809 JavaScript 👤 kickscondor User 🕐 Обновлено 2024-02-07 📅 Создано 2019-06-22
137
lit26/finvizfinance

Python-библиотека для анализа Finviz.

lit26
⭐ 1,790 Python 👤 lit26 User 🕐 Обновлено 2026-11-18 📅 Создано 2020-07-23
138
adsbypasser/adsbypasser

Обойти счетчик рекламы, если возможно.

adsbypasser
⭐ 1,790 JavaScript 👤 adsbypasser Organization 🕐 Обновлено 2026-11-21 📅 Создано 2012-12-17
139
oxylabs/how-to-scrape-google-jobs

Узнайте, как создать собственный скрапер Google Jobs, который одновременно извлекает данные о вакансиях Google для нескольких поисковых запросов и географических местоположений с помощью Python и API Google Jobs Scraper от Oxylabs. https://oxylabs.io/blog/how-to-scrape-google-jobs

oxylabs
⭐ 1,761 Python 👤 oxylabs Organization 🕐 Обновлено 2026-11-18 📅 Создано 2024-02-08
140
ProxyShard/ShardBrowser

Бесплатный браузерный лаунчер с открытым исходным кодом и защитой от обнаружения для веб-скрейпинга и работы с несколькими аккаунтами. От команды ShardX (ранее ProxyShard). Подмена отпечатка на уровне движка в Chromium 158 (WebGL / WebGPU / Client Hints / шрифты / TLS), более 220 встроенных профилей устройств, стабильная работа QUIC + WebRTC через SOCKS5.

ProxyShard
⭐ 1,735 TypeScript 👤 ProxyShard User 🕐 Обновлено 2026-11-21 📅 Создано 2026-05-30
141
egoist/sitefetch

Получите весь сайт и сохраните его в текстовый файл (для использования с моделями ИИ).

egoist
⭐ 1,733 TypeScript 👤 egoist User 🕐 Обновлено 2025-01-18 📅 Создано 2025-01-07
142
acoooder/aliyunpanshare

Обмен ресурсами кино и телевидения через Baidu Netdisk, Quark Netdisk и Aliyun Drive. Ежедневная публикация новейших сериалов, развлекательных шоу и киноресурсов.

acoooder
⭐ 1,729 👤 acoooder User 🕐 Обновлено 2026-11-21 📅 Создано 2023-02-21
143
qinlili23333/ctfileGet

Получить одноразовый адрес прямого подключения для Chengtong Cloud Drive

qinlili23333
⭐ 1,725 JavaScript 👤 qinlili23333 User 🕐 Обновлено 2025-11-07 📅 Создано 2021-02-11
144
oxylabs/scrape-google-python

В этом руководстве мы покажем, как собирать общедоступные данные Google с помощью Python и API Oxylabs.

oxylabs
⭐ 1,719 👤 oxylabs Organization 🕐 Обновлено 2026-11-18 📅 Создано 2024-07-30
145
rushter/selectolax

Python-библиотека для движков Modest и Lexbor. Быстрый парсер HTML5 с CSS-селекторами для Python.

rushter
⭐ 1,717 Python 👤 rushter User 🕐 Обновлено 2026-11-10 📅 Создано 2017-11-26
146
Shrans/GalSites

Чао~(∠・ω< )⌒☆

Shrans
⭐ 1,716 Python 👤 Shrans User 🕐 Обновлено 2026-10-26 📅 Создано 2024-10-16
147
gildas-lormeau/single-file-cli

CLI-инструмент для сохранения точной копии полной веб-страницы в одном HTML-файле (на основе SingleFile)

gildas-lormeau
⭐ 1,702 JavaScript 👤 gildas-lormeau User 🕐 Обновлено 2026-11-18 📅 Создано 2022-05-31
148
MgArcher/Text_select_captcha

Реализация выбора текста, выбора символов, выбора и распознавания сенсорных CAPTCHA, обученная на PyTorch

MgArcher
⭐ 1,679 Python 👤 MgArcher User 🕐 Обновлено 2026-05-08 📅 Создано 2020-08-23
149
Altimis/Scweet

Скрейпер Twitter и X для Python: собирайте твиты, профили, подписчиков, подписки и тренды без официального API. Библиотека для скрейпинга Twitter с пулом нескольких аккаунтов, поддержкой прокси и асинхронной обработкой или размещённая на Apify версия.

Altimis
⭐ 1,667 Python 👤 Altimis User 🕐 Обновлено 2026-11-20 📅 Создано 2020-12-14
150
ttttmr/Wechat2RSS

Официальный аккаунт WeChat в RSS

ttttmr
⭐ 1,665 Shell 👤 ttttmr User 🕐 Обновлено 2026-11-20 📅 Создано 2021-09-25