Git Stars Git Stars

#web-scraping Repository

381
Totale Repository
2.1M
Totale stelle
5,636
Media Stelle/Repo
151
Nutlope/turboseek

Un motore di ricerca AI ispirato da Perplexity

Nutlope
โญ 1,660 TypeScript ๐Ÿ‘ค Nutlope User ๐Ÿ• Aggiornato 2026-10-23 ๐Ÿ“… Creato 2024-05-26
152
oxylabs/ai-map-py

AI Map รจ uno strumento di mappatura di siti web basato sull'intelligenza artificiale, sviluppato da Oxylabs AI Studio, che utilizza prompt in linguaggio naturale per scoprire ed estrarre in modo intelligente URL pertinenti da qualsiasi sito web.

oxylabs
โญ 1,651 ๐Ÿ‘ค oxylabs Organization ๐Ÿ• Aggiornato 2026-04-02 ๐Ÿ“… Creato 2025-10-29
153
orangecoding/fredy

โค๏ธ Fredy - [F]ind [R]eal [E]state [D]amn Eas[y] (trova immobili veri con estrema facilitร ) - Fredy continua a cercare nuovi appartamenti, case e alloggi in Europa su piattaforme come ImmoScout24, Immowelt ed eBay Kleinanzeigen e ti invia immediatamente i risultati tramite Slack, Telegram, e-mail, Discord o ntfy, cosรฌ puoi concentrarti sulle cose piรน importanti della vita ;)

orangecoding
โญ 1,648 JavaScript ๐Ÿ‘ค orangecoding User ๐Ÿ• Aggiornato 2026-11-19 ๐Ÿ“… Creato 2018-01-15
154
Xetera/ghost-cursor

๐Ÿ–ฑ๏ธ Genera movimenti del mouse simili a quelli umani con puppeteer o su qualsiasi piano 2D

Xetera
โญ 1,634 TypeScript ๐Ÿ‘ค Xetera User ๐Ÿ• Aggiornato 2026-11-04 ๐Ÿ“… Creato 2019-10-15
155
justmarkham/DAT8

Corso di Data Science di General Assembly 2015 a Washington, DC

justmarkham
โญ 1,622 Jupyter Notebook ๐Ÿ‘ค justmarkham User ๐Ÿ• Aggiornato 2024-06-05 ๐Ÿ“… Creato 2015-08-07
156
karust/openserp

Ricerca web self-hosted per agenti IA e SEO. Google, Bing, Yandex, Baidu, DuckDuckGo ed Ecosia, elaborati in un vero browser: risultati classificati e Markdown pulito delle pagine. API, CLI, MCP ๐ŸŽ‰

karust
โญ 1,605 Go ๐Ÿ‘ค karust User ๐Ÿ• Aggiornato 2026-11-19 ๐Ÿ“… Creato 2023-06-23
157
Kaliiiiiiiiii-Vinyzu/patchright-python

Versione Python non rilevata della libreria di test e automazione Playwright.

Kaliiiiiiiiii-Vinyzu
โญ 1,603 Python ๐Ÿ‘ค Kaliiiiiiiiii-Vinyzu Organization ๐Ÿ• Aggiornato 2026-11-10 ๐Ÿ“… Creato 2024-11-02
158
ulixee/hero

Il browser web creato per lo scraping

ulixee
โญ 1,557 TypeScript ๐Ÿ‘ค ulixee Organization ๐Ÿ• Aggiornato 2026-05-16 ๐Ÿ“… Creato 2021-07-28
159
dteviot/WebToEpub

Un'estensione semplice per Chrome (e Firefox) che converte i romanzi web (e altre pagine web) in un EPUB.

dteviot
โญ 1,544 JavaScript ๐Ÿ‘ค dteviot User ๐Ÿ• Aggiornato 2026-11-20 ๐Ÿ“… Creato 2015-11-23
160
headzoo/surf

Navigazione web programmatica con stato in Go.

headzoo
โญ 1,533 Go ๐Ÿ‘ค headzoo User ๐Ÿ• Aggiornato 2024-01-24 ๐Ÿ“… Creato 2014-08-25
161
0x676e67/wreq-python

Un client HTTP Python ergonomico e attento alla privacy

0x676e67
โญ 1,526 Python ๐Ÿ‘ค 0x676e67 User ๐Ÿ• Aggiornato 2026-11-15 ๐Ÿ“… Creato 2025-02-10
162
tidyverse/rvest

Web scraping semplice per R

tidyverse
โญ 1,524 R ๐Ÿ‘ค tidyverse Organization ๐Ÿ• Aggiornato 2026-10-27 ๐Ÿ“… Creato 2014-07-23
163
tinyfish-io/agentql

AgentQL รจ una suite di strumenti per connettere la tua AI al web. Dotato di un linguaggio di query e integrazioni Playwright per interagire con gli elementi ed estrarre dati in modo rapido, preciso e su larga scala. Include API REST, SDK Python e JavaScript, debugger per browser.

tinyfish-io
โญ 1,510 Python ๐Ÿ‘ค tinyfish-io Organization ๐Ÿ• Aggiornato 2026-11-21 ๐Ÿ“… Creato 2024-02-20
164
liguobao/HouseSearch

Cerca case in affitto sulla mappa: stanco di girare per tutta la cittร  alla ricerca di un affitto? Prova un metodo diverso e cerca direttamente sulla mappa! [Account ufficiale e mini-programma WeChat: ไบบ็”Ÿๅˆ ้™คๆŒ‡ๅ—]

liguobao
โญ 1,495 JavaScript ๐Ÿ‘ค liguobao User ๐Ÿ• Aggiornato 2026-11-14 ๐Ÿ“… Creato 2016-08-07
165
antonmedv/finder

Generatore di selettori CSS ๐Ÿ—บ

antonmedv
โญ 1,491 HTML ๐Ÿ‘ค antonmedv User ๐Ÿ• Aggiornato 2025-11-20 ๐Ÿ“… Creato 2018-02-20
166
rebrowser/rebrowser-patches

Raccolta di patch per puppeteer e playwright per evitare il rilevamento dell'automazione e le perdite. Aiuta a evitare le pagine CAPTCHA di Cloudflare e DataDome. Facile da patchare/unpatchare, puรฒ essere abilitato/disabilitato su richiesta.

rebrowser
โญ 1,468 JavaScript ๐Ÿ‘ค rebrowser Organization ๐Ÿ• Aggiornato 2026-11-02 ๐Ÿ“… Creato 2024-08-06
167
ScrapingBee/chatgpt-scraper-api

Raccogli risposte strutturate da uno scraper ChatGPT inviando un prompt con credenziali API di scraping ChatGPT valide. Abilita la ricerca live, inietta il contesto HTML e automatizza flussi di lavoro intelligenti di scraper ChatGPT con pochi parametri.

ScrapingBee
โญ 1,465 ๐Ÿ‘ค ScrapingBee Organization ๐Ÿ• Aggiornato 2026-07-15 ๐Ÿ“… Creato 2026-03-12
168
Surfer-Org/Protocol

Framework open-source per l'esportazione dei tuoi dati personali.

Surfer-Org
โญ 1,462 TypeScript ๐Ÿ‘ค Surfer-Org Organization ๐Ÿ• Aggiornato 2024-12-25 ๐Ÿ“… Creato 2024-08-09
169
austin-weeks/miasma

Intrappola i web scraper AI in una fossa di veleno infinita.

austin-weeks
โญ 1,459 Rust ๐Ÿ‘ค austin-weeks User ๐Ÿ• Aggiornato 2026-11-05 ๐Ÿ“… Creato 2026-03-18
170
roach-php/core

Il toolkit completo di web scraping per PHP.

roach-php
โญ 1,456 PHP ๐Ÿ‘ค roach-php Organization ๐Ÿ• Aggiornato 2025-10-27 ๐Ÿ“… Creato 2021-08-17
171
wordware-ai/twitter

Agente AI per l'analisi della personalitร  di Twitter

wordware-ai
โญ 1,446 TypeScript ๐Ÿ‘ค wordware-ai Organization ๐Ÿ• Aggiornato 2026-08-02 ๐Ÿ“… Creato 2024-06-03
172
mattsse/chromiumoxide

API Rust per Chrome Devtools Protocol

mattsse
โญ 1,437 Rust ๐Ÿ‘ค mattsse User ๐Ÿ• Aggiornato 2026-04-03 ๐Ÿ“… Creato 2020-11-28
173
Miserlou/SoundScrape

Downloader per SoundCloud (e Bandcamp e Mixcloud) in Python.

Miserlou
โญ 1,436 Python ๐Ÿ‘ค Miserlou User ๐Ÿ• Aggiornato 2024-06-23 ๐Ÿ“… Creato 2013-12-29
174
foxhui/WebAI2API

WebAI2API: Strumento di conversione AI web in API basato su Camoufox, supporta LMArena/Gemini e altro, concorrenza multi-finestra e isolamento account. | Web AI to OpenAI API via Camoufox. Supports LMArena/Gemini and more, multi-window concurrency & account isolation.

foxhui
โญ 1,429 JavaScript ๐Ÿ‘ค foxhui User ๐Ÿ• Aggiornato 2026-07-10 ๐Ÿ“… Creato 2025-11-23
175
oxylabs/how-to-scrape-google-finance

Utilizza l'API Web Scraper per estrarre dati da Google Finance, inclusi i titoli azionari, i prezzi e le variazioni di prezzo in percentuale.

oxylabs
โญ 1,403 Python ๐Ÿ‘ค oxylabs Organization ๐Ÿ• Aggiornato 2025-09-23 ๐Ÿ“… Creato 2024-09-25
176
feder-cr/invisible_puppeteer

Puppeteer per Python che i sistemi anti-bot non riescono a rilevare, cosรฌ non ci sono CAPTCHA: stessa API, Firefox headless stealth anti-rilevamento, impronta digitale non rilevabile, aggiramento del rilevamento dei bot, scraping web e automazione del browser.

feder-cr
โญ 1,403 Python ๐Ÿ‘ค feder-cr User ๐Ÿ• Aggiornato 2026-10-19 ๐Ÿ“… Creato 2024-09-01
177
mckaywrigley/clarity-ai

Un clone di Perplexity.

mckaywrigley
โญ 1,401 TypeScript ๐Ÿ‘ค mckaywrigley User ๐Ÿ• Aggiornato 2024-03-28 ๐Ÿ“… Creato 2023-02-19
178
facundoolano/app-store-scraper

Estrarre dati dall'iTunes App Store

facundoolano
โญ 1,396 JavaScript ๐Ÿ‘ค facundoolano User ๐Ÿ• Aggiornato 2025-07-27 ๐Ÿ“… Creato 2016-05-31
179
regenrek/deepwiki-mcp

๐Ÿ“– Server MCP per recuperare deepwiki.com e ottenere le ultime conoscenze in Cursor e altri editor di codice

regenrek
โญ 1,393 TypeScript ๐Ÿ‘ค regenrek User ๐Ÿ• Aggiornato 2026-03-20 ๐Ÿ“… Creato 2025-04-28
180
sardanioss/httpcloak

Cliente HTTP Go con fingerprinting TLS/HTTP2 identico al browser. Evita la rilevazione di bot imitandosi perfettamente Chrome, Firefox e Safari a livello crittografico (JA3/JA4, impronta Akamai, ordine delle intestazioni). Supporta HTTP/1.1, HTTP/2, HTTP/3, sessioni, cookie e proxy.

sardanioss
โญ 1,387 Go ๐Ÿ‘ค sardanioss User ๐Ÿ• Aggiornato 2026-11-14 ๐Ÿ“… Creato 2025-12-28
181
MiniGlome/Archive.org-Downloader

Script Python3 per scaricare libri da archive.org in formato PDF

MiniGlome
โญ 1,385 Python ๐Ÿ‘ค MiniGlome User ๐Ÿ• Aggiornato 2026-09-27 ๐Ÿ“… Creato 2021-02-17
182
fugary/calibre-douban

Nuovo plugin di origine metadati Douban per Calibre. Douban non fornisce piรน API di libri al pubblico, quindi puรฒ solo utilizzare il web crawling per ottenere dati. Questo รจ un plugin Calibre Douban basato sul web crawling.

fugary
โญ 1,382 Python ๐Ÿ‘ค fugary User ๐Ÿ• Aggiornato 2025-11-08 ๐Ÿ“… Creato 2021-12-12
183
firecrawl/open-scouts

๐Ÿ”ฅ Piattaforma di monitoraggio web alimentata dall'IA. Crea esploratori automatizzati che cercano sul web e inviano avvisi via email quando trovano ciรฒ che stai cercando.

firecrawl
โญ 1,372 TypeScript ๐Ÿ‘ค firecrawl Organization ๐Ÿ• Aggiornato 2026-11-13 ๐Ÿ“… Creato 2025-11-28
184
sourcegraph/webloop

WebLoop: WebKit mit Skripting und Headless-Betrieb รผber eine Go-API. Wie PhantomJS, aber fรผr Go.

sourcegraph
โญ 1,366 Go ๐Ÿ‘ค sourcegraph Organization ๐Ÿ• Aggiornato 2024-04-01 ๐Ÿ“… Creato 2013-10-27
185
philippta/flyscrape

Flyscrape รจ uno strumento di web scraping a riga di comando progettato per coloro che non hanno competenze di programmazione avanzate.

philippta
โญ 1,347 Go ๐Ÿ‘ค philippta User ๐Ÿ• Aggiornato 2025-11-24 ๐Ÿ“… Creato 2023-08-28
186
Sniper970119/dianping_spider

Crawler Dianping (interamente navigabile sul sito, risolve la crittografia dei font dinamici, non OCR). Aggiornamento continuo

Sniper970119
โญ 1,329 Python ๐Ÿ‘ค Sniper970119 User ๐Ÿ• Aggiornato 2026-11-03 ๐Ÿ“… Creato 2021-01-22
187
firecrawl/fire-enrich

Strumento di arricchimento dati basato sull'IA che trasforma le e-mail in set di dati ricchi con profili aziendali, dati di finanziamento, stack tecnologici e altro ancora utilizzando Firecrawl e IA multi-agente

firecrawl
โญ 1,308 TypeScript ๐Ÿ‘ค firecrawl Organization ๐Ÿ• Aggiornato 2026-10-26 ๐Ÿ“… Creato 2025-06-06
188
AI4Finance-Foundation/FinNLP

Democratizzazione dei dati finanziari su scala Internet.

AI4Finance-Foundation
โญ 1,292 Jupyter Notebook ๐Ÿ‘ค AI4Finance-Foundation Organization ๐Ÿ• Aggiornato 2024-07-01 ๐Ÿ“… Creato 2023-02-07
189
kkangert/kspider

Kspider รจ una piattaforma di scraping che consente di definire flussi di scraping graficamente, consentendo l'implementazione di un flusso di scraping senza codice. Kspider non si limita allo scraping web, ma puรฒ anche essere utilizzato per test di automazione WEB. Altre funzionalitร  ti aspettano per essere esplorate.

kkangert
โญ 1,285 Java ๐Ÿ‘ค kkangert User ๐Ÿ• Aggiornato 2024-08-19 ๐Ÿ“… Creato 2024-07-07
190
fastcrw/crw

Alternativa veloce e leggera a Firecrawl/Tavily scritta in Rust. API di web scraping, crawler e ricerca con server MCP per agenti IA. API compatibile con Firecrawl (/scrape, /crawl, /search). 2,3 volte piรน veloce di Tavily, 1,5 volte piรน veloce di Firecrawl in benchmark su 1K URL. 6 MB di RAM, binario singolo. Self-hosting o cloud gestito.

fastcrw
โญ 1,284 Rust ๐Ÿ‘ค fastcrw Organization ๐Ÿ• Aggiornato 2026-11-21 ๐Ÿ“… Creato 2026-03-02
191
techwithtim/Price-Tracking-Web-Scraper

Un tracker di prezzi automatizzato che utilizza Bright Data, Playwright, React e Flask.

techwithtim
โญ 1,284 Python ๐Ÿ‘ค techwithtim User ๐Ÿ• Aggiornato 2024-10-17 ๐Ÿ“… Creato 2023-06-23
192
ovobrowsersupport/ovobrowser

Motore per lโ€™impronta digitale di Chromium a livello di codice sorgente, valutato come un normale Chrome dai siti di rilevamento. Motore per lโ€™impronta digitale di Chromium a livello di codice sorgente che supera i test di rilevamento dei bot. Non si tratta di unโ€™iniezione JS: sono patch C++ compilate nel binario.

ovobrowsersupport
โญ 1,277 ๐Ÿ‘ค ovobrowsersupport User ๐Ÿ• Aggiornato 2026-11-16 ๐Ÿ“… Creato 2026-08-23
193
raawaa/jav-scrapy

Il lavoratore instancabile per il recupero batch di link magnet AV o copertine

raawaa
โญ 1,275 JavaScript ๐Ÿ‘ค raawaa User ๐Ÿ• Aggiornato 2026-10-17 ๐Ÿ“… Creato 2015-10-31
194
TaxyAI/browser-extension

Automatizza il tuo browser con GPT-4

TaxyAI
โญ 1,269 TypeScript ๐Ÿ‘ค TaxyAI Organization ๐Ÿ• Aggiornato 2025-01-15 ๐Ÿ“… Creato 2023-03-27
195
chromedp/examples

esempi di codice chromedp.

chromedp
โญ 1,265 Go ๐Ÿ‘ค chromedp Organization ๐Ÿ• Aggiornato 2026-11-18 ๐Ÿ“… Creato 2017-12-26
196
Decodo/Decodo

Proxy residenziali rotanti HTTP(S)/SOCKS5 - esempi di codice e informazioni generali.

Decodo
โญ 1,264 Java ๐Ÿ‘ค Decodo Organization ๐Ÿ• Aggiornato 2026-11-11 ๐Ÿ“… Creato 2019-01-07
197
MarioVilas/googlesearch

Ricerca Google da Python (non ufficiale).

MarioVilas
โญ 1,249 Python ๐Ÿ‘ค MarioVilas User ๐Ÿ• Aggiornato 2025-11-11 ๐Ÿ“… Creato 2012-10-22
198
kairi003/Get-cookies.txt-LOCALLY

Ottieni cookies.txt, NON inviare MAI informazioni all'esterno.

kairi003
โญ 1,230 JavaScript ๐Ÿ‘ค kairi003 User ๐Ÿ• Aggiornato 2025-10-07 ๐Ÿ“… Creato 2023-03-01
199
mika-cn/maoxian-web-clipper

Un'estensione web per ritagliare informazioni dalle pagine web. Salvala sulla tua macchina locale per evitare l'invalidazione delle informazioni. Nessuna registrazione noiosa, nessuna tariffa.

mika-cn
โญ 1,230 JavaScript ๐Ÿ‘ค mika-cn User ๐Ÿ• Aggiornato 2026-08-23 ๐Ÿ“… Creato 2018-08-09
200
eooce/Auto-login-netlib

Accesso automatico al sito web netlib.re per mantenere attivo il dominio

eooce
โญ 1,220 JavaScript ๐Ÿ‘ค eooce User ๐Ÿ• Aggiornato 2025-11-08 ๐Ÿ“… Creato 2025-11-06