Git Stars Git Stars

#web-scraping Repository

381
Totale Repository
2.1M
Totale stelle
5,636
Media Stelle/Repo

382 repository in totale

51
matthewmueller/x-ray

Il prossimo web scraper. Vedi attraverso il rumore <html>.

matthewmueller
⭐ 5,899 JavaScript 👤 matthewmueller User 🕐 Aggiornato 2026-08-31 📅 Creato 2015-02-05
52
omkarcloud/botasaurus

Il framework tutto in uno per costruire scraper invincibili

omkarcloud
⭐ 5,857 TypeScript 👤 omkarcloud Organization 🕐 Aggiornato 2026-11-13 📅 Creato 2023-05-09
53
executeautomation/mcp-playwright

Playwright Model Context Protocol Server - Strumento per automatizzare Browser e API in Claude Desktop, Cline, Cursor IDE e altro 🔌

executeautomation
⭐ 5,681 TypeScript 👤 executeautomation User 🕐 Aggiornato 2025-12-13 📅 Creato 2024-12-03
54
KnockOutEZ/wigolo

Il web di riferimento per il tuo agente di codifica AI — ricerca locale, recupero, crawling e ricerca tramite MCP. Nessuna chiave API, nessun cloud, $0/query. Beta pubblica.

KnockOutEZ
⭐ 5,560 TypeScript 👤 KnockOutEZ User 🕐 Aggiornato 2026-11-21 📅 Creato 2026-04-12
55
Kaliiiiiiiiii-Vinyzu/patchright

Versione non rilevata della libreria di test e automazione Playwright.

Kaliiiiiiiiii-Vinyzu
⭐ 5,227 TypeScript 👤 Kaliiiiiiiiii-Vinyzu Organization 🕐 Aggiornato 2026-11-13 📅 Creato 2023-11-07
56
Manavarya09/design-extract

Estrai il sistema di design completo di qualsiasi sito web con un solo comando. Token DTCG, semantico+primitivo+composito, server MCP per Claude Code/Cursor/Windsurf, emettitori multi-piattaforma (iOS SwiftUI, Android Compose, Flutter, WordPress), Tailwind v4, variabili Figma, shadcn/ui, audit di salute CSS, rimediazione WCAG, estensione Chrome. MIT, Playwright, Node 20+.

Manavarya09
⭐ 5,180 HTML 👤 Manavarya09 User 🕐 Aggiornato 2026-11-18 📅 Creato 2026-04-15
57
ultrafunkamsterdam/nodriver

Successore di Undetected-Chromedriver. Fornisce un framework velocissimo per l'automazione del web, il web scraping, i bot e qualsiasi altra idea creativa che normalmente è ostacolata da fastidiosi sistemi anti-bot come Captcha / CloudFlare / Imperva / hCaptcha.

ultrafunkamsterdam
⭐ 4,950 Python 👤 ultrafunkamsterdam User 🕐 Aggiornato 2026-10-26 📅 Creato 2024-02-20
58
jaypyles/Scraperr

Web scraper self-hosted.

jaypyles
⭐ 4,876 TypeScript 👤 jaypyles User 🕐 Aggiornato 2025-10-12 📅 Creato 2024-07-06
59
NanmiCoder/CrawlerTutorial

Introduzione allo scraping, Avanzamento nello scraping, Scraping avanzato

NanmiCoder
⭐ 4,873 Python 👤 NanmiCoder User 🕐 Aggiornato 2026-04-03 📅 Creato 2024-03-24
60
request/request-promise

Il client di richiesta HTTP semplificato 'request' con supporto Promise. Basato su Bluebird.

request
⭐ 4,734 JavaScript 👤 request Organization 🕐 Aggiornato 2024-01-31 📅 Creato 2013-10-04
61
REMitchell/python-scraping

Esempi di codice dal libro Web Scraping with Python http://shop.oreilly.com/product/0636920034391.do

REMitchell
⭐ 4,669 Jupyter Notebook 👤 REMitchell User 🕐 Aggiornato 2024-06-01 📅 Creato 2015-06-14
62
AhmadHassan-BTed/Noria

Un estrattore agentico per piattaforme di messaggistica. Noria riceve messaggi e URL via chat, raccoglie dati dal web per valutare i contenuti in base a matrici di punteggio personalizzate (ad es. offerte di lavoro e borse di studio) e invia direttamente al numero di messaggistica assegnato un riepilogo strutturato con un punteggio di corrispondenza calcolato.

AhmadHassan-BTed
⭐ 4,624 JavaScript 👤 AhmadHassan-BTed User 🕐 Aggiornato 2026-11-10 📅 Creato 2026-05-31
63
linsomniac/spotify_to_ytmusic

Copia playlist e musica preferita da Spotify a YTMusic

linsomniac
⭐ 4,588 Python 👤 linsomniac User 🕐 Aggiornato 2026-04-13 📅 Creato 2023-12-22
64
0xHJK/music-dl

cerca e scarica musica Da NetEase Cloud Music, QQ Music, KuGou Music, Baidu Music, Xiami Music, MiGu Music, ecc. cerca e scarica canzoni

0xHJK
⭐ 4,423 Python 👤 0xHJK User 🕐 Aggiornato 2025-08-12 📅 Creato 2019-01-08
65
ssut/py-googletrans

(non ufficiale) Googletrans: API gratuita e illimitata di Google Translate per Python. Traduce completamente gratis.

ssut
⭐ 4,303 Python 👤 ssut User 🕐 Aggiornato 2026-08-08 📅 Creato 2015-06-05
66
RookieEnough/Orion-Store

La casa ideale per le app open source e ripulite. OrionStore offre accesso immediato a YouTube Morphe, YT Music Morphe e agli strumenti open source essenziali, senza inutili fronzoli. Niente server, niente tracciamento: solo un gateway moderno ed elegante per le app che ami.

RookieEnough
⭐ 4,285 Kotlin 👤 RookieEnough User 🕐 Aggiornato 2026-11-19 📅 Creato 2025-11-28
67
scrapinghub/splash

Browser leggero e scriptable come servizio con un'API HTTP

scrapinghub
⭐ 4,197 Python 👤 scrapinghub Organization 🕐 Aggiornato 2024-08-02 📅 Creato 2013-05-20
68
kalil0321/reverse-api-engineer

Esegui il reverse engineering di qualsiasi sito web per trasformarlo in un client API tipizzato. Compatibile con Claude Code, Codex, Cursor e OpenCode.

kalil0321
⭐ 4,088 Python 👤 kalil0321 User 🕐 Aggiornato 2026-11-21 📅 Creato 2025-12-23
69
snooppr/snoop

Snoop – uno strumento OSINT (Open Source Intelligence) basato su dati aperti

snooppr
⭐ 4,072 Python 👤 snooppr User 🕐 Aggiornato 2026-11-20 📅 Creato 2020-02-14
70
IonicaBizau/scrape-it

🔮 Uno scraper Node.js per umani.

IonicaBizau
⭐ 4,069 JavaScript 👤 IonicaBizau User 🕐 Aggiornato 2026-11-20 📅 Creato 2016-04-28
71
ericciarla/trendFinder

Tieniti aggiornato sugli argomenti di tendenza sui social media e sul web con l'IA

ericciarla
⭐ 4,016 TypeScript 👤 ericciarla User 🕐 Aggiornato 2025-02-17 📅 Creato 2024-12-31
72
osnr/TabFS

🗄 Monta le tue schede del browser come un filesystem.

osnr
⭐ 3,916 JavaScript 👤 osnr User 🕐 Aggiornato 2024-12-28 📅 Creato 2019-02-26
73
Samueli924/chaoxing

Superstar Learning Cloud / Super Star Er Ya / Pan Ya Super Star Completamento automatico completamente automatico dei punti attività incustoditi

Samueli924
⭐ 3,883 Python 👤 Samueli924 User 🕐 Aggiornato 2026-09-28 📅 Creato 2020-11-20
74
sentient-agi/OpenDeepSearch

LLM basato sulla ricerca SOTA

sentient-agi
⭐ 3,824 Python 👤 sentient-agi Organization 🕐 Aggiornato 2025-04-04 📅 Creato 2025-03-20
75
edoardottt/cariddi

Esegui una scansione di URL da un elenco di domini e cerca endpoint, segreti, chiavi API, estensioni di file, token e altro.

edoardottt
⭐ 3,817 Go 👤 edoardottt User 🕐 Aggiornato 2026-11-19 📅 Creato 2021-04-27
76
3441293738/creatorhub

Monitoraggio · raccolta · ripubblicazione dei contenuti su più piattaforme. Un’unica dashboard web per gestire Douyin / Xiaohongshu / Kuaishou / Canali WeChat / TikTok / Bilibili / Instagram / Xiaohongshu internazionale (rednote)

3441293738
⭐ 3,774 Python 👤 3441293738 User 🕐 Aggiornato 2026-11-21 📅 Creato 2026-07-03
77
Anakin-Inc/anakin

API di web scraping open source. Trasforma qualsiasi sito web in Markdown pulito o JSON strutturato. Browser anti-rilevamento, selezione automatica dei proxy, self-hosted. Un solo comando: make up

Anakin-Inc
⭐ 3,764 Go 👤 Anakin-Inc Organization 🕐 Aggiornato 2026-08-18 📅 Creato 2026-03-17
78
cv-cat/DouYin_Spider

Ingegneria inversa di TikTok, crawler di TikTok, tutte le API di TikTok, messaggi privati, monitoraggio sale live

cv-cat
⭐ 3,711 Python 👤 cv-cat User 🕐 Aggiornato 2026-10-23 📅 Creato 2023-10-17
79
oxylabs/amazon-scraper

API scraper Amazon di prova gratuita per estrarre dati da ricerche, prodotti, elenchi di offerte, recensioni, domande e risposte, bestseller e venditori.

oxylabs
⭐ 3,417 Python 👤 oxylabs Organization 🕐 Aggiornato 2026-11-18 📅 Creato 2022-11-29
81
oxylabs/oxylabs-ai-studio-py

Raccolta di dati strutturati da qualsiasi sito web utilizzando scraper, crawler e automazione del browser basati sull'IA. Scraping e crawling con prompt in linguaggio naturale. Fornite ai vostri agenti LLM dati aggiornati. SDK Python AI Studio per la raccolta intelligente di dati web.

oxylabs
⭐ 3,394 Python 👤 oxylabs Organization 🕐 Aggiornato 2026-08-21 📅 Creato 2025-06-17
82
vibheksoni/stealth-browser-mcp

Automazione stealth del browser per agenti IA tramite MCP e il protocollo Chrome DevTools: navigazione, hook di rete, estrazione del DOM e clonazione dell’interfaccia utente con precisione al pixel.

vibheksoni
⭐ 3,384 Python 👤 vibheksoni User 🕐 Aggiornato 2026-11-20 📅 Creato 2025-08-09
83
php-curl-class/php-curl-class

PHP Curl Class rende facile l'invio di richieste HTTP e l'integrazione con le API web.

php-curl-class
⭐ 3,293 PHP 👤 php-curl-class Organization 🕐 Aggiornato 2026-11-17 📅 Creato 2013-08-16
84
Virtual-Browser/VirtualBrowser

Browser anti-impronta digitale gratuito, browser per impronte digitali, browser per la privacy, browser anti-riconoscimento, browser anti-identificazione, browser anti-associazione, browser gratuito specifico per airdrop Web3 tramite impronta digitale https://virtualbrowser.cc/?src=github

Virtual-Browser
⭐ 3,282 Vue 👤 Virtual-Browser User 🕐 Aggiornato 2026-10-16 📅 Creato 2023-05-20
85
hydrusnetwork/hydrus

Un tagger di media personale in stile booru che può importare file e tag dal tuo disco rigido e da siti web popolari. Il contenuto può essere condiviso con altri utenti tramite server gestiti dagli utenti.

hydrusnetwork
⭐ 3,276 Python 👤 hydrusnetwork User 🕐 Aggiornato 2026-11-18 📅 Creato 2013-02-19
86
oxylabs/how-to-scrape-amazon-product-data

Il processo di estrazione dei dati dei prodotti da Amazon tramite Python, inclusi titoli, valutazioni, prezzi, immagini e descrizioni.

oxylabs
⭐ 3,248 Python 👤 oxylabs Organization 🕐 Aggiornato 2026-11-18 📅 Creato 2024-09-03
87
mitsuhiko/agent-stuff

Questi sono comandi che uso con gli agenti, principalmente Claude.

mitsuhiko
⭐ 3,223 TypeScript 👤 mitsuhiko User 🕐 Aggiornato 2026-09-27 📅 Creato 2025-11-02
88
scrapy/scrapyd

Un demone di servizio per eseguire spider di Scrapy

scrapy
⭐ 3,100 Python 👤 scrapy Organization 🕐 Aggiornato 2026-10-23 📅 Creato 2013-02-01
90
langchain-ai/social-media-agent

📲 Un agente per l'approvvigionamento, la curatela e la pianificazione di post sui social media con intervento umano.

langchain-ai
⭐ 3,045 TypeScript 👤 langchain-ai Organization 🕐 Aggiornato 2026-11-18 📅 Creato 2024-11-21
91
TheBlewish/Automated-AI-Web-Researcher-Ollama

Un programma Python che trasforma un LLM, in esecuzione su Ollama, in un ricercatore automatizzato, che con una singola query determinerà le aree di interesse da indagare, effettuerà ricerche sul web e raccoglierà contenuti da vari siti web pertinenti e farà ricerche per te da solo! E non solo, ma include anche il salvataggio dei risultati per te!

TheBlewish
⭐ 3,019 Python 👤 TheBlewish User 🕐 Aggiornato 2026-09-02 📅 Creato 2024-11-20
92
x4nth055/pythoncode-tutorials

I Tutorial di Codice Python

x4nth055
⭐ 3,003 Jupyter Notebook 👤 x4nth055 User 🕐 Aggiornato 2026-09-30 📅 Creato 2019-07-29
93
vladkens/twscrape

Libreria Python e CLI per lo scraping di X/Twitter con rotazione multi-account e gestione integrata dei limiti di velocità.

vladkens
⭐ 2,980 Python 👤 vladkens User 🕐 Aggiornato 2026-11-19 📅 Creato 2023-05-05
94
rust-headless-chrome/rust-headless-chrome

Un'API di alto livello per controllare Chrome o Chromium headless tramite il protocollo DevTools. È l'equivalente Rust di Puppeteer, una libreria Node mantenuta dal team di Chrome DevTools.

rust-headless-chrome
⭐ 2,960 Rust 👤 rust-headless-chrome Organization 🕐 Aggiornato 2026-06-11 📅 Creato 2018-09-18
95
oxylabs/how-to-scrape-google-trends

Impara passo dopo passo come fare scraping dei dati di Google Trends e confrontare i risultati utilizzando Python e l'API SERP di Oxylabs. Estrai parole chiave, la loro popolarità, la suddivisione per regione, le query correlate e altro ancora.

oxylabs
⭐ 2,907 Python 👤 oxylabs Organization 🕐 Aggiornato 2026-11-18 📅 Creato 2024-08-06
96
digininja/CeWL

CeWL è un Generatore di Elenchi di Parole Personalizzati

digininja
⭐ 2,896 Ruby 👤 digininja User 🕐 Aggiornato 2026-06-24 📅 Creato 2016-04-22
97
spider-rs/spider

Raccolta di dati web a bassa latenza di base in Rust

spider-rs
⭐ 2,856 Rust 👤 spider-rs Organization 🕐 Aggiornato 2026-11-20 📅 Creato 2018-01-07
98
Geniusay/ChopperBot

Huya, Douyu, Douyin, BiliBili, TikTok, Twitch🔥Popolare🔥Robot AI intelligente per il montaggio e la pubblicazione di video live, Automazione🤖, Completamente intelligente⚙(generazione automatica di clip, titoli, miniature, descrizioni), Visualizzazione👓, Monitoraggio piattaforme popolari🌡, Plugin ricchi estendibili a piacimento🕹, Distribuzione rapida⚡, Pubblicazione automatica per account video🌟, Supporto DIY🎮

Geniusay
⭐ 2,758 Java 👤 Geniusay User 🕐 Aggiornato 2025-08-04 📅 Creato 2023-04-27
99
levywang/avhub

Strumento di ricerca e gestione risorse R18

levywang
⭐ 2,742 Vue 👤 levywang User 🕐 Aggiornato 2026-04-18 📅 Creato 2025-03-07
100
brightdata/brightdata-mcp

Un potente server Model Context Protocol (MCP) che fornisce una soluzione all-in-one per l'accesso al web pubblico.

brightdata
⭐ 2,733 JavaScript 👤 brightdata Organization 🕐 Aggiornato 2026-11-18 📅 Creato 2025-04-15