Git Stars Git Stars

#web-scraping Repository

381
Totale Repository
2.1M
Totale stelle
5,636
Media Stelle/Repo
101
jerry3747/taobao_seckill

Taobao, Tmall sconti dimezzati, acquista TV, acquista Maotai, sconfiggi i bagarini

jerry3747
โญ 2,667 Python ๐Ÿ‘ค jerry3747 User ๐Ÿ• Aggiornato 2024-07-12 ๐Ÿ“… Creato 2020-12-29
102
Predidit/KazumiRules

Il repository di hosting delle regole di Kazumi, i contributi sono i benvenuti ^โ€ข๏ปŒโ€ข^

Predidit
โญ 2,653 Dart ๐Ÿ‘ค Predidit User ๐Ÿ• Aggiornato 2026-11-13 ๐Ÿ“… Creato 2024-05-22
103
Anning01/AIMedia

AIMedia รจ un software integrato che acquisisce automaticamente i trend, crea articoli con AI e li pubblica automaticamente. Supporta Toutiao, Xiaohongshu, WeChat Official Accounts e altro.

Anning01
โญ 2,619 TypeScript ๐Ÿ‘ค Anning01 User ๐Ÿ• Aggiornato 2026-11-04 ๐Ÿ“… Creato 2024-10-28
104
oss-invisible/playwright

Playwright invisibile: un Playwright che i sistemi anti-bot non possono rilevare, quindi niente CAPTCHA: stessa API, Firefox headless stealth con protezione anti-rilevamento, impronta digitale non rilevabile, aggira il rilevamento dei bot, scraping web e automazione del browser con Python.

oss-invisible
โญ 2,612 Python ๐Ÿ‘ค oss-invisible Organization ๐Ÿ• Aggiornato 2026-11-21 ๐Ÿ“… Creato 2026-05-13
105
Mahanaicoach/google-maps-scraper-kit

Scraper gratuito e open source di Google Maps per la generazione di lead (Python, senza chiave API nรฉ Docker). Esporta in CSV nome, telefono, email, sito web, valutazione e link a Instagram/Facebook/LinkedIn/TikTok/YouTube/X. 100 luoghi con email in 44 s; --grid supera il limite di 120 imposto da Google. Verifica dei record MX delle email e rilevamento dei pixel pubblicitari. Skill per Claude Code, Codex e Cursor.

Mahanaicoach
โญ 2,567 Python ๐Ÿ‘ค Mahanaicoach User ๐Ÿ• Aggiornato 2026-11-19 ๐Ÿ“… Creato 2026-06-21
106
lorien/grab

Framework per Web Scraping

lorien
โญ 2,461 Python ๐Ÿ‘ค lorien User ๐Ÿ• Aggiornato 2025-09-19 ๐Ÿ“… Creato 2013-05-01
107
openbullet/OpenBullet2

OpenBullet reinventato

openbullet
โญ 2,447 C# ๐Ÿ‘ค openbullet User ๐Ÿ• Aggiornato 2026-09-07 ๐Ÿ“… Creato 2020-04-23
108
0xMassi/webclaw

Estrazione rapida di contenuti web local-first per LLM. Scraping, crawling, estrazione dati strutturati โ€” tutto da Rust. CLI, REST API e server MCP.

0xMassi
โญ 2,440 Rust ๐Ÿ‘ค 0xMassi User ๐Ÿ• Aggiornato 2026-11-21 ๐Ÿ“… Creato 2026-03-10
109
paquettg/php-html-parser

Un parser HTML DOM. Ti permette di manipolare l'HTML. Trova tag in una pagina HTML con selettori proprio come jQuery.

paquettg
โญ 2,405 HTML ๐Ÿ‘ค paquettg User ๐Ÿ• Aggiornato 2024-08-09 ๐Ÿ“… Creato 2013-12-13
110
drunkdream/weread-exporter

Esporta libri da WeChat Reading in formati come epub, pdf, mobi

drunkdream
โญ 2,403 Python ๐Ÿ‘ค drunkdream User ๐Ÿ• Aggiornato 2026-03-21 ๐Ÿ“… Creato 2023-02-11
111
saifyxpro/HeadlessX

Piattaforma di automazione del browser self-hosted e indetectabile. Alimentata da Camoufox (Firefox) con tasso di rilevamento zero. Progettata per velocitร , privacy e scalabilitร .

saifyxpro
โญ 2,365 TypeScript ๐Ÿ‘ค saifyxpro User ๐Ÿ• Aggiornato 2026-11-12 ๐Ÿ“… Creato 2025-09-12
112
jxhczhl/JsRpc

Chiamata di metodi del browser RPC (Remote Procedure Call), evitando di scrivere codice manualmente e configurare ambienti

jxhczhl
โญ 2,352 Go ๐Ÿ‘ค jxhczhl User ๐Ÿ• Aggiornato 2026-06-08 ๐Ÿ“… Creato 2021-09-25
113
codingforentrepreneurs/30-Days-of-Python

Impara Python per i prossimi 30 (o giรน di lรฌ) giorni.

codingforentrepreneurs
โญ 2,232 HTML ๐Ÿ‘ค codingforentrepreneurs User ๐Ÿ• Aggiornato 2024-02-27 ๐Ÿ“… Creato 2016-03-09
114
chao325/MaoTai_GUIT

Tmall TaoBao iMaotai iMatoTai JD Jingdong acquisto lampo, Jingdong Maotai acquisto lampo versione Windows, pronto all'uso out-of-the-box senza configurazione ambiente. Sviluppo imminente (protocollo open source con Apache License)

chao325
โญ 2,147 Python ๐Ÿ‘ค chao325 User ๐Ÿ• Aggiornato 2026-11-12 ๐Ÿ“… Creato 2023-09-20
115
btahir/open-deep-research

Alternativa open source a Gemini Deep Research. Genera report con IA basati sui risultati di ricerca.

btahir
โญ 2,141 TypeScript ๐Ÿ‘ค btahir User ๐Ÿ• Aggiornato 2025-12-15 ๐Ÿ“… Creato 2024-12-24
116
ThePhaseless/Byparr

Ottieni tu stesso i tuoi cookie antibot validi!

ThePhaseless
โญ 2,117 Python ๐Ÿ‘ค ThePhaseless User ๐Ÿ• Aggiornato 2026-11-19 ๐Ÿ“… Creato 2024-07-24
117
oxylabs/how-to-scrape-google-scholar

Una guida per estrarre titoli, autori e citazioni da Google Scholar utilizzando Python e l'API Oxylabs SERP Scraper.

oxylabs
โญ 2,095 Python ๐Ÿ‘ค oxylabs Organization ๐Ÿ• Aggiornato 2026-11-18 ๐Ÿ“… Creato 2024-03-07
118
oxylabs/how-to-scrape-amazon-prices

Un codice per estrarre articoli bestseller, risultati di ricerca e offerte attualmente disponibili da Amazon utilizzando Python e l'API Oxylabs E-Commerce Scraper.

oxylabs
โญ 2,083 Python ๐Ÿ‘ค oxylabs Organization ๐Ÿ• Aggiornato 2026-11-18 ๐Ÿ“… Creato 2024-03-21
119
ssili126/tv

Sorgenti live IPv4 per TV di hotel raccolte automaticamente, test automatico della velocitร  di riproduzione, aggiornamento automatico giornaliero. Include canali CCTV nazionali, canali satellitari e alcuni canali locali, riproduzione fluida. Puรฒ anche essere eseguito su OpenWrt o Docker di Synology.

ssili126
โญ 2,052 Python ๐Ÿ‘ค ssili126 User ๐Ÿ• Aggiornato 2026-11-04 ๐Ÿ“… Creato 2024-01-12
120
supermemoryai/markdowner

Uno strumento veloce per convertire qualsiasi sito web in dati markdown pronti per LLM. Realizzato da https://supermemory.ai

supermemoryai
โญ 2,033 TypeScript ๐Ÿ‘ค supermemoryai Organization ๐Ÿ• Aggiornato 2026-10-02 ๐Ÿ“… Creato 2024-05-09
121
midudev/curso-python

Corso di Python da zero e per tutti i pubblici con esercizi

midudev
โญ 2,006 Python ๐Ÿ‘ค midudev User ๐Ÿ• Aggiornato 2026-10-16 ๐Ÿ“… Creato 2025-01-15
122
zhegexiaohuozi/SeimiCrawler

Un framework di crawling Java semplice, agile e distribuito che supporta Spring Boot; Un framework di crawling agile e distribuito.

zhegexiaohuozi
โญ 1,984 Java ๐Ÿ‘ค zhegexiaohuozi User ๐Ÿ• Aggiornato 2026-11-17 ๐Ÿ“… Creato 2015-11-06
123
KEV0143/Parser-Chitai-Gorod

Parser intelligente per il catalogo "Chitai-Gorod". Raccolta e strutturazione dei dati ad alta velocitร  basate su qualsiasi parametro specificato: dall'ISBN alle dinamiche di sconto.

KEV0143
โญ 1,979 Python ๐Ÿ‘ค KEV0143 User ๐Ÿ• Aggiornato 2026-09-17 ๐Ÿ“… Creato 2025-05-18
124
bogdanfinn/tls-client

net/http.Client come HTTP Client con opzioni per selezionare specifiche impronte digitali TLS del client da utilizzare per le richieste.

bogdanfinn
โญ 1,949 Go ๐Ÿ‘ค bogdanfinn User ๐Ÿ• Aggiornato 2026-11-18 ๐Ÿ“… Creato 2022-07-09
125
stevenyomi/copymanga

Estensione CopyManga per Tachiyomi.

stevenyomi
โญ 1,941 ๐Ÿ‘ค stevenyomi User ๐Ÿ• Aggiornato 2024-02-18 ๐Ÿ“… Creato 2022-06-30
126
nat/natbot

Guida un browser con GPT-3

nat
โญ 1,933 Python ๐Ÿ‘ค nat User ๐Ÿ• Aggiornato 2024-06-09 ๐Ÿ“… Creato 2022-09-29
127
ARC-MX/sgcc_electricity_new

HomeAssistant Interrogazione Tariffa Rete Elettrica Nazionale

ARC-MX
โญ 1,925 Python ๐Ÿ‘ค ARC-MX User ๐Ÿ• Aggiornato 2026-11-07 ๐Ÿ“… Creato 2024-05-08
128
bugswriter/notflix

Notflix รจ uno script di shell per cercare e trasmettere torrent.

bugswriter
โญ 1,913 Shell ๐Ÿ‘ค bugswriter User ๐Ÿ• Aggiornato 2024-06-18 ๐Ÿ“… Creato 2022-01-01
129
saermart/DouyinLiveWebFetcher

Acquisizione dati per i commenti della versione web di Douyin Live (ultima versione 2025)

saermart
โญ 1,909 Python ๐Ÿ‘ค saermart User ๐Ÿ• Aggiornato 2026-09-08 ๐Ÿ“… Creato 2024-01-02
โญ 1,894 Python ๐Ÿ‘ค LawRefBook Organization ๐Ÿ• Aggiornato 2026-11-18 ๐Ÿ“… Creato 2022-03-21
131
Freedium-cfd/web

QUESTO REPOSITORY รˆ SOLO UNO SPECCHIO! Il repository principale di sviluppo รจ https://codeberg.org/Freedium-cfd/web

Freedium-cfd
โญ 1,885 Python ๐Ÿ‘ค Freedium-cfd Organization ๐Ÿ• Aggiornato 2026-10-20 ๐Ÿ“… Creato 2023-08-21
132
enetx/surf

SURF - Client HTTP Go avanzato con impersonificazione del browser Chrome/Firefox, HTTP/3 con fingerprinting QUIC, emulazione TLS JA3/JA4 e bypass anti-bot per automazione web e scraping.

enetx
โญ 1,853 Go ๐Ÿ‘ค enetx User ๐Ÿ• Aggiornato 2026-11-15 ๐Ÿ“… Creato 2025-08-30
133
microlinkhq/browserless

Il driver headless di Chrome/Chromium basato su Puppeteer. Scatta screenshot, genera PDF, estrai testo e HTML con un'API pronta per la produzione.

microlinkhq
โญ 1,846 JavaScript ๐Ÿ‘ค microlinkhq Organization ๐Ÿ• Aggiornato 2026-11-20 ๐Ÿ“… Creato 2017-09-06
134
tkfy920/qstock

qstock รจ stato sviluppato dal "Python Financial Quant" public account, con l'obiettivo di creare un pacchetto personale di analisi quantitativa per la ricerca sugli investimenti, attualmente comprendente moduli per l'acquisizione dati (data), la visualizzazione (plot), la selezione azionaria (stock) e il backtesting quantitativo (strategy backtest). qstock fornirร  agli utenti un'interfaccia dati concisa e dati di mercato finanziari normalizzati. Il modulo di visualizzazione offrirร  agli utenti un'interfaccia semplice per grafici interattivi basati sul web; il modulo di selezione azionaria fornirร  dati di selezione azionaria da Tonghuashun e selezione azionaria personalizzata, inclusi RPS, trend MM, indicatori finanziari, modello di flusso di cassa, ecc.; il modulo di backtesting fornirร  a tutti un framework e un modello di base vettorizzati (basati su pandas) e basati su eventi. Segui il "Python Financial Quant" public account di WeChat per ottenere maggiori informazioni sulle applicazioni.

tkfy920
โญ 1,839 Python ๐Ÿ‘ค tkfy920 User ๐Ÿ• Aggiornato 2025-03-16 ๐Ÿ“… Creato 2022-10-10
135
deweizhu/bookget

bookget Strumento per il download di libri antichi digitali.

deweizhu
โญ 1,824 Go ๐Ÿ‘ค deweizhu User ๐Ÿ• Aggiornato 2026-01-23 ๐Ÿ“… Creato 2023-04-09
136
kickscondor/fraidycat

Segui blog, wiki, canali YouTube, nonchรฉ account su Twitter, Instagram, ecc. da una singola pagina.

kickscondor
โญ 1,809 JavaScript ๐Ÿ‘ค kickscondor User ๐Ÿ• Aggiornato 2024-02-07 ๐Ÿ“… Creato 2019-06-22
137
lit26/finvizfinance

Libreria Python per l'analisi Finviz.

lit26
โญ 1,790 Python ๐Ÿ‘ค lit26 User ๐Ÿ• Aggiornato 2026-11-18 ๐Ÿ“… Creato 2020-07-23
138
adsbypasser/adsbypasser

Aggira il contatore degli annunci se possibile.

adsbypasser
โญ 1,790 JavaScript ๐Ÿ‘ค adsbypasser Organization ๐Ÿ• Aggiornato 2026-11-21 ๐Ÿ“… Creato 2012-12-17
139
oxylabs/how-to-scrape-google-jobs

Scopri come creare il tuo scraper di Google Jobs che estrae contemporaneamente offerte di lavoro da Google per piรน query di ricerca e geolocalizzazioni con Python e l'API Google Jobs Scraper di Oxylabs. https://oxylabs.io/blog/how-to-scrape-google-jobs

oxylabs
โญ 1,761 Python ๐Ÿ‘ค oxylabs Organization ๐Ÿ• Aggiornato 2026-11-18 ๐Ÿ“… Creato 2024-02-08
140
ProxyShard/ShardBrowser

Launcher gratuito e open source per browser anti-rilevamento, destinato al web scraping e alla gestione di piรน account. Del team ShardX (precedentemente ProxyShard). Spoofing dellโ€™impronta digitale a livello di motore in Chromium 158 (WebGL / WebGPU / Client Hints / caratteri / TLS), oltre 220 profili dispositivo inclusi e QUIC + WebRTC stabile tramite SOCKS5.

ProxyShard
โญ 1,735 TypeScript ๐Ÿ‘ค ProxyShard User ๐Ÿ• Aggiornato 2026-11-21 ๐Ÿ“… Creato 2026-05-30
141
egoist/sitefetch

Recupera un intero sito e salvalo come file di testo (da utilizzare con modelli AI).

egoist
โญ 1,733 TypeScript ๐Ÿ‘ค egoist User ๐Ÿ• Aggiornato 2025-01-18 ๐Ÿ“… Creato 2025-01-07
142
acoooder/aliyunpanshare

Condivisione di risorse cinematografiche e televisive su Baidu Netdisk, Quark Netdisk e Aliyun Drive. Pubblicazione quotidiana delle ultime serie TV, programmi di varietร  e risorse cinematografiche.

acoooder
โญ 1,729 ๐Ÿ‘ค acoooder User ๐Ÿ• Aggiornato 2026-11-21 ๐Ÿ“… Creato 2023-02-21
143
qinlili23333/ctfileGet

Ottieni un indirizzo di collegamento diretto una tantum per Chengtong Cloud Drive

qinlili23333
โญ 1,725 JavaScript ๐Ÿ‘ค qinlili23333 User ๐Ÿ• Aggiornato 2025-11-07 ๐Ÿ“… Creato 2021-02-11
144
oxylabs/scrape-google-python

In questo tutorial, mostriamo come estrarre dati pubblici di Google con Python e l'API di Oxylabs.

oxylabs
โญ 1,719 ๐Ÿ‘ค oxylabs Organization ๐Ÿ• Aggiornato 2026-11-18 ๐Ÿ“… Creato 2024-07-30
145
rushter/selectolax

Binding Python per i motori Modest e Lexbor. Analizzatore HTML5 veloce con selettori CSS per Python.

rushter
โญ 1,717 Python ๐Ÿ‘ค rushter User ๐Ÿ• Aggiornato 2026-11-10 ๐Ÿ“… Creato 2017-11-26
146
Shrans/GalSites

Ciao๏ฝž(โˆ ใƒปฯ‰< )โŒ’โ˜†

Shrans
โญ 1,716 Python ๐Ÿ‘ค Shrans User ๐Ÿ• Aggiornato 2026-10-26 ๐Ÿ“… Creato 2024-10-16
147
gildas-lormeau/single-file-cli

Strumento CLI per salvare una copia fedele di una pagina web completa in un singolo file HTML (basato su SingleFile)

gildas-lormeau
โญ 1,702 JavaScript ๐Ÿ‘ค gildas-lormeau User ๐Ÿ• Aggiornato 2026-11-18 ๐Ÿ“… Creato 2022-05-31
148
MgArcher/Text_select_captcha

Implementazione di selezione del testo, selezione di caratteri, selezione e riconoscimento di captcha touch-based, addestrato su PyTorch

MgArcher
โญ 1,679 Python ๐Ÿ‘ค MgArcher User ๐Ÿ• Aggiornato 2026-05-08 ๐Ÿ“… Creato 2020-08-23
149
Altimis/Scweet

Scraper di Twitter e X per Python: raccogli tweet, profili, follower, account seguiti e tendenze senza lโ€™API ufficiale. Una libreria per lo scraping di Twitter con gestione di piรน account, supporto proxy e funzionalitร  asincrone, oppure una versione ospitata su Apify.

Altimis
โญ 1,667 Python ๐Ÿ‘ค Altimis User ๐Ÿ• Aggiornato 2026-11-20 ๐Ÿ“… Creato 2020-12-14
150
ttttmr/Wechat2RSS

WeChat Public Account a RSS

ttttmr
โญ 1,665 Shell ๐Ÿ‘ค ttttmr User ๐Ÿ• Aggiornato 2026-11-20 ๐Ÿ“… Creato 2021-09-25