Git Stars Git Stars

#web-scraping Repository

381
Totale Repository
2.1M
Totale stelle
5,636
Media Stelle/Repo
301
z0m31en7/Uscrapper

Uscrapper Vanta: Immergi piรน a fondo nel web con questo potente strumento open-source. Estrai informazioni preziose con facilitร  ed efficienza, sia da fonti del web di superficie che del deep web. Potenzia il tuo data mining e la tua analisi con le funzionalitร  avanzate di Vanta. Veloce, affidabile e facile da usare, Uscrapper Vanta รจ la scelta definitiva per ricercatori e analisti.

z0m31en7
โญ 740 Python ๐Ÿ‘ค z0m31en7 User ๐Ÿ• Aggiornato 2024-11-24 ๐Ÿ“… Creato 2023-05-31
302
djadmin/medium-cli

Medium per Hacker - :computer: Un CLI per le Storie di Medium.

djadmin
โญ 735 JavaScript ๐Ÿ‘ค djadmin User ๐Ÿ• Aggiornato 2026-02-13 ๐Ÿ“… Creato 2016-01-21
303
drawrowfly/amazon-product-api

Amazon Scraper. Estrai prodotti dai risultati di ricerca Amazon o recensioni da un prodotto specifico

drawrowfly
โญ 734 JavaScript ๐Ÿ‘ค drawrowfly User ๐Ÿ• Aggiornato 2024-07-05 ๐Ÿ“… Creato 2019-10-06
304
ScrapeGraphAI/scrapecraft

Editor di web scraping basato sull'IA con costruttore di flussi di lavoro visivo. Costruisci, testa e distribuisci scraper web utilizzando il linguaggio naturale. Alimentato da ScrapeGraphAI e LangGraph.

ScrapeGraphAI
โญ 731 Python ๐Ÿ‘ค ScrapeGraphAI Organization ๐Ÿ• Aggiornato 2025-12-26 ๐Ÿ“… Creato 2025-07-01
305
rubycdp/vessel

Framework Ruby veloce per il web crawling di alto livello

rubycdp
โญ 725 Ruby ๐Ÿ‘ค rubycdp Organization ๐Ÿ• Aggiornato 2026-11-03 ๐Ÿ“… Creato 2019-09-17
306
MorganZhang100/zhihu-spider

Un web spider per zhihu.com

MorganZhang100
โญ 725 Python ๐Ÿ‘ค MorganZhang100 User ๐Ÿ• Aggiornato 2024-01-17 ๐Ÿ“… Creato 2015-02-22
307
lzjun567/python_scripts

Alcuni codici dimostrativi relativi a Python

lzjun567
โญ 715 HTML ๐Ÿ‘ค lzjun567 User ๐Ÿ• Aggiornato 2024-07-21 ๐Ÿ“… Creato 2017-02-07
308
lhccong/fish-island-backend

Moyu Island ๐ŸŽฃ Backend Basato su Web Scraping โž• Netty โž• SpringBoot โž•Redisโž• MySQL Open Source ๐ŸŒŸ Sito Web Moyu All-in-One

lhccong
โญ 710 Java ๐Ÿ‘ค lhccong User ๐Ÿ• Aggiornato 2026-11-18 ๐Ÿ“… Creato 2025-02-20
309
kovidgoyal/html5-parser

Parsing HTML 5 rapido basato su C per Python

kovidgoyal
โญ 710 C ๐Ÿ‘ค kovidgoyal User ๐Ÿ• Aggiornato 2026-09-20 ๐Ÿ“… Creato 2017-06-03
310
lumpinif/deepcrawl

100% gratuito e alternativa open-source completa a Firecrawl edge con estrazione link migliore per agenti - che puoi deployare su Cloudflare o Vercel da solo.

lumpinif
โญ 704 TypeScript ๐Ÿ‘ค lumpinif User ๐Ÿ• Aggiornato 2026-08-24 ๐Ÿ“… Creato 2025-05-22
311
maaaaz/webscreenshot

Uno script semplice per catturare screenshot di una lista di siti web

maaaaz
โญ 696 Python ๐Ÿ‘ค maaaaz User ๐Ÿ• Aggiornato 2025-10-19 ๐Ÿ“… Creato 2014-01-12
312
only-cli/oc

Trasforma qualsiasi sito web in una CLI compatta, pensata per gli agenti di IA. Naviga sul web usando centinaia di token, non decine di migliaia.

only-cli
โญ 694 JavaScript ๐Ÿ‘ค only-cli User ๐Ÿ• Aggiornato 2026-11-17 ๐Ÿ“… Creato 2026-08-18
313
firecrawl/cli

CLI e funzionalitร  per agenti di Firecrawl: cerca, estrai contenuti e interagisci con il Web dal tuo terminale o da qualsiasi agente di programmazione; inoltre, analizza, esplora e mappa i siti e usa Agent e Monitor. Firecrawl รจ lโ€™API di contesto per gli agenti IA.

firecrawl
โญ 694 TypeScript ๐Ÿ‘ค firecrawl Organization ๐Ÿ• Aggiornato 2026-11-19 ๐Ÿ“… Creato 2026-01-07
314
karpathy/hn-time-capsule

Analisi retrospettiva con LLM delle discussioni di Hacker News risalenti a un decennio fa

karpathy
โญ 693 Python ๐Ÿ‘ค karpathy User ๐Ÿ• Aggiornato 2025-12-10 ๐Ÿ“… Creato 2025-12-10
315
xiaosimao/IP_POOL

Pool di proxy IP gratuiti

xiaosimao
โญ 686 Python ๐Ÿ‘ค xiaosimao User ๐Ÿ• Aggiornato 2025-09-15 ๐Ÿ“… Creato 2017-09-22
316
perkeep/gphotos-cdp

Questo programma utilizza il protocollo Chrome DevTools per guidare una sessione Chrome che scarica le tue foto memorizzate in Google Photos.

perkeep
โญ 683 Go ๐Ÿ‘ค perkeep Organization ๐Ÿ• Aggiornato 2024-06-30 ๐Ÿ“… Creato 2019-08-08
317
yixiu001/Free-SS-NODES

Ottieni nodi SS gratuiti

yixiu001
โญ 681 ๐Ÿ‘ค yixiu001 User ๐Ÿ• Aggiornato 2024-11-11 ๐Ÿ“… Creato 2024-11-11
318
everyinfra/everyinfra-agent-plugins

Server MCP e plugin per agenti EveryInfra: API di scraping per TikTok, Instagram, Amazon, YouTube, Xiaohongshu e Douyin. 612 API di dati su 106 piattaforme, a partire da 0,56 $ ogni 1.000 chiamate. Per Claude Code, Cursor e Codex.

everyinfra
โญ 672 Python ๐Ÿ‘ค everyinfra Organization ๐Ÿ• Aggiornato 2026-11-21 ๐Ÿ“… Creato 2026-09-01
319
firecrawl/open-researcher

๐Ÿ”ฅ Assistente di ricerca visuale AI che mostra il pensiero in tempo reale, fornisce analisi a vista divisa e citazioni automatiche usando Claude e Firecrawl

firecrawl
โญ 667 TypeScript ๐Ÿ‘ค firecrawl Organization ๐Ÿ• Aggiornato 2025-07-02 ๐Ÿ“… Creato 2025-06-27
320
wimglenn/advent-of-code-data

Ottieni i tuoi dati Advent of Code con una singola istruzione di importazione

wimglenn
โญ 666 Python ๐Ÿ‘ค wimglenn User ๐Ÿ• Aggiornato 2026-08-01 ๐Ÿ“… Creato 2016-12-03
321
oxylabs/Agent-browser

Esegui script di automazione complessi tramite sessioni cloud remote, dotati di proxy residenziali integrati, risoluzione automatica dei CAPTCHA e rendering JavaScript nativo per i siti web dinamici piรน complessi.

oxylabs
โญ 663 ๐Ÿ‘ค oxylabs Organization ๐Ÿ• Aggiornato 2026-11-18 ๐Ÿ“… Creato 2026-04-17
322
adamschwartz/web.scraper.workers.dev

Estrai testo dai siti web tramite selettore CSS.

adamschwartz
โญ 658 JavaScript ๐Ÿ‘ค adamschwartz User ๐Ÿ• Aggiornato 2024-02-14 ๐Ÿ“… Creato 2019-10-10
323
asmcos/requests

Una libreria client HTTP per Golang. Saluto a python requests.

asmcos
โญ 656 Go ๐Ÿ‘ค asmcos User ๐Ÿ• Aggiornato 2026-10-09 ๐Ÿ“… Creato 2018-08-27
324
yanzhou/CnkiSpider

Crawler di China National Knowledge Infrastructure

yanzhou
โญ 653 Python ๐Ÿ‘ค yanzhou User ๐Ÿ• Aggiornato 2025-03-08 ๐Ÿ“… Creato 2014-11-05
325
11firefly11/fir-proxy

Un programma di pool di proxy grafico con proxy rotanti

11firefly11
โญ 650 Python ๐Ÿ‘ค 11firefly11 User ๐Ÿ• Aggiornato 2025-12-04 ๐Ÿ“… Creato 2025-07-22
326
KNKPA/KNKPAnime

KNKPAnime: Un software per guardare anime che supporta sorgenti multi-episodio e sottotitoli.

KNKPA
โญ 648 Dart ๐Ÿ‘ค KNKPA Organization ๐Ÿ• Aggiornato 2025-02-01 ๐Ÿ“… Creato 2024-04-20
327
Threezh1/SiteCopy

sitecopy รจ uno strumento che facilita il backup di siti web personali e la raccolta di dati di rete

Threezh1
โญ 647 Python ๐Ÿ‘ค Threezh1 User ๐Ÿ• Aggiornato 2024-01-21 ๐Ÿ“… Creato 2019-12-12
328
ScrapingBee/google-hotels-api

Automatizza lo scraping dei dati degli hotel, inclusi prezzi, disponibilitร , valutazioni e fornitori di prenotazione, con un'integrazione dell'API Google Hotels.

ScrapingBee
โญ 645 ๐Ÿ‘ค ScrapingBee Organization ๐Ÿ• Aggiornato 2026-04-08 ๐Ÿ“… Creato 2026-04-08
โญ 640 CSS ๐Ÿ‘ค dreamsofcode-io Organization ๐Ÿ• Aggiornato 2024-08-04 ๐Ÿ“… Creato 2024-07-26
330
cfinke/EpsteOut

Scopri quali delle tue connessioni LinkedIn compaiono nei file di Epstein.

cfinke
โญ 638 Python ๐Ÿ‘ค cfinke User ๐Ÿ• Aggiornato 2026-10-17 ๐Ÿ“… Creato 2026-02-04
331
lzjqsdd/NewsSpider

Crawling di notizie da Toutiao, NetEase, Tencent ecc. e creazione di un semplice motore di ricerca

lzjqsdd
โญ 638 Python ๐Ÿ‘ค lzjqsdd User ๐Ÿ• Aggiornato 2024-05-14 ๐Ÿ“… Creato 2016-04-19
332
scrapfly/Antibot-Detector

Rilevamento in tempo reale di sistemi anti-bot, captcha e tecniche di fingerprinting. Identifica Cloudflare, Akamai, DataDome, reCAPTCHA, hCaptcha, Shape Security e altri, con punteggio di affidabilitร  e strumenti avanzati di acquisizione.

scrapfly
โญ 636 JavaScript ๐Ÿ‘ค scrapfly Organization ๐Ÿ• Aggiornato 2026-11-17 ๐Ÿ“… Creato 2025-09-03
333
ohyicong/Google-Image-Scraper

Una libreria per raschiare immagini da Google

ohyicong
โญ 636 Python ๐Ÿ‘ค ohyicong User ๐Ÿ• Aggiornato 2025-02-16 ๐Ÿ“… Creato 2020-07-18
335
deedy5/primp

Client HTTP in grado di impersonare browser web

deedy5
โญ 634 Rust ๐Ÿ‘ค deedy5 User ๐Ÿ• Aggiornato 2026-09-13 ๐Ÿ“… Creato 2024-04-12
336
achuthasubhash/Complete-Life-Cycle-of-a-Data-Science-Project

Ciclo di vita completo di un progetto di data science

achuthasubhash
โญ 631 ๐Ÿ‘ค achuthasubhash User ๐Ÿ• Aggiornato 2024-06-07 ๐Ÿ“… Creato 2020-09-02
337
eliemichel/LilySurfaceScraper

Importa shader e ambienti in Blender da un singolo URL

eliemichel
โญ 625 Cython ๐Ÿ‘ค eliemichel User ๐Ÿ• Aggiornato 2026-06-19 ๐Ÿ“… Creato 2019-04-28
338
super-l/superl-url

Un programma che raccoglie contenuti da URL nei risultati di ricerca dei motori di ricerca basato su parole chiave. Puรฒ raccogliere automaticamente indirizzi reali e titoli di siti web correlati da piรน motori di ricerca, salvarli in file e rimuovere automaticamente URL duplicati. Inoltre, consente di ignorare in modo personalizzato piรน domini.

super-l
โญ 621 Python ๐Ÿ‘ค super-l User ๐Ÿ• Aggiornato 2025-04-12 ๐Ÿ“… Creato 2017-08-03
339
Lofter1/anyflip-downloader

Scarica i libri anyflip in formato PDF

Lofter1
โญ 619 Go ๐Ÿ‘ค Lofter1 User ๐Ÿ• Aggiornato 2026-11-16 ๐Ÿ“… Creato 2023-02-05
340
chenluda/zhihu-download

Convertire gli articoli delle colonne di Zhihu in file Markdown e salvarli localmente

chenluda
โญ 613 Python ๐Ÿ‘ค chenluda User ๐Ÿ• Aggiornato 2025-03-21 ๐Ÿ“… Creato 2023-05-12
341
liuda30201/AI-Coding

Guida ai vantaggi per la programmazione con lโ€™IA: un elenco di servizi intermediari e siti comunitari per Claude Code, Codex e Cursor. Raccoglie quote gratuite, bonus di registrazione, iniziative di accesso giornaliero e recensioni, e offre una dashboard visuale e strumenti Python per la raccolta dei dati.

liuda30201
โญ 611 HTML ๐Ÿ‘ค liuda30201 User ๐Ÿ• Aggiornato 2026-11-21 ๐Ÿ“… Creato 2026-10-15
342
alchaincyf/huashu-chrome

Consenti a qualsiasi agente IA di controllare il tuo Chrome, mantenendo tutte le sessioni attive. MCP + estensione per Chrome, compatibile con Claude Code / Codex / Cursor / Gemini CLI.

alchaincyf
โญ 609 JavaScript ๐Ÿ‘ค alchaincyf User ๐Ÿ• Aggiornato 2026-11-15 ๐Ÿ“… Creato 2026-08-26
343
testusyd/douyin_downloader

Macchina per capsule con sacchetti portafortuna di Douyin, strumento per afferrare sacchetti portafortuna di Douyin, scritto da me in VC++ nel mio tempo libero, con alcune altre piccole funzioni, downloader di video Douyin senza filigrana, downloader di registrazioni di live streaming Douyin, strumento per annullare l'iscrizione in blocco su Douyin

testusyd
โญ 605 ๐Ÿ‘ค testusyd User ๐Ÿ• Aggiornato 2026-03-08 ๐Ÿ“… Creato 2025-05-22
344
ThinkerWen/TicketMonitoring

Orzo, Cat's Eye, Fenwan Island, Ticket Planet, Monitoraggio biglietti di ritorno per concerti

ThinkerWen
โญ 605 Python ๐Ÿ‘ค ThinkerWen User ๐Ÿ• Aggiornato 2025-01-24 ๐Ÿ“… Creato 2023-10-22
345
lunnar211/HackFacebokpass

Hacking di Facebook con Termux. Questo tool รจ codato da TecnicalDipesh. Puoi dumpare qualsiasi ID e password di Facebook.

lunnar211
โญ 603 Python ๐Ÿ‘ค lunnar211 User ๐Ÿ• Aggiornato 2026-03-26 ๐Ÿ“… Creato 2019-11-11
346
web-agent-master/google-search

Uno strumento Node.js basato su Playwright che aggira i meccanismi anti-scraping dei motori di ricerca per eseguire ricerche Google. Alternativa locale alle API SERP con integrazione del server MCP.

web-agent-master
โญ 598 TypeScript ๐Ÿ‘ค web-agent-master Organization ๐Ÿ• Aggiornato 2025-04-06 ๐Ÿ“… Creato 2025-03-04
347
jiuzhi-1/meituan-shenquan

Meituan Coupon del Giorno Attivitร  Regionale Script di Automazione

jiuzhi-1
โญ 595 Python ๐Ÿ‘ค jiuzhi-1 User ๐Ÿ• Aggiornato 2024-05-08 ๐Ÿ“… Creato 2021-10-15
348
ytdl-org/ytdl-nightly

Build notturni per youtube-dl.

ytdl-org
โญ 593 Python ๐Ÿ‘ค ytdl-org Organization ๐Ÿ• Aggiornato 2026-11-06 ๐Ÿ“… Creato 2023-07-02
349
shaikhsajid1111/social-media-profile-scrapers

Recupera i dati dell'utente sui social media

shaikhsajid1111
โญ 588 Python ๐Ÿ‘ค shaikhsajid1111 User ๐Ÿ• Aggiornato 2026-09-15 ๐Ÿ“… Creato 2020-04-26
350
spekulatius/PHPScraper

Un utility web universale per PHP.

spekulatius
โญ 588 PHP ๐Ÿ‘ค spekulatius User ๐Ÿ• Aggiornato 2026-09-08 ๐Ÿ“… Creato 2020-04-21