#web-scraper Repository
Scopri 36 repository GitHub open source attivi contrassegnati con #web-scraper, che raccolgono un totale di 565,282 stelle (con una media di 15,702 stelle per progetto). Il progetto leader di questo argomento è firecrawl/firecrawl, con 205,758 stelle.
36 repository in totale
Infrastruttura di conoscenza per rendere più intelligenti i tuoi agenti. Cerca, estrai e accedi a oltre 550 fornitori di dati tramite un’unica API.
Dai al tuo agente IA gli occhi per vedere l’intero Internet. Leggi e cerca su Twitter, Reddit, YouTube, GitHub, Bilibili, XiaoHongShu — un unico CLI, zero costi di API.
🕷️ Il MIGLIOR framework per il web scraping, in grado di gestire tutto, da una singola richiesta a una scansione su larga scala! Non essere timido: unisciti qui https://discord.gg/EMgGbDceNQ e seguici qui per consigli e trucchi quotidiani: https://x.com/Scrapling_dev
Il miglior browser headless per gli agenti IA. Leggero, veloce e altamente compatibile. Sviluppato in Rust
Trasforma qualsiasi sito web in un’API strutturata. Estrai, automatizza, cerca e monitora il web.
scraping dati da Google Maps. Estrae dati come nome, indirizzo, numero di telefono, URL del sito web, valutazione, numero di recensioni, latitudine e longitudine, recensioni, email e altro per ogni luogo
Estensione per browser di livello professionale, con elaborazione locale prioritaria, che trasforma qualsiasi pagina web in Markdown ad alta fedeltà e ottimizzato per gli LLM, interamente all’interno del browser. Senza cloud, attenta alla privacy e progettata appositamente per i flussi di lavoro dell’IA.
Estrai risposte dalla modalità AI di Google su larga scala senza blocchi.
PHP Curl Class rende facile l'invio di richieste HTTP e l'integrazione con le API web.
Il processo di estrazione dei dati dei prodotti da Amazon tramite Python, inclusi titoli, valutazioni, prezzi, immagini e descrizioni.
Una guida per estrarre titoli, autori e citazioni da Google Scholar utilizzando Python e l'API Oxylabs SERP Scraper.
Un codice per estrarre articoli bestseller, risultati di ricerca e offerte attualmente disponibili da Amazon utilizzando Python e l'API Oxylabs E-Commerce Scraper.
Strumento CLI per salvare una copia fedele di una pagina web completa in un singolo file HTML (basato su SingleFile)
Alternativa veloce e leggera a Firecrawl/Tavily scritta in Rust. API di web scraping, crawler e ricerca con server MCP per agenti IA. API compatibile con Firecrawl (/scrape, /crawl, /search). 2,3 volte più veloce di Tavily, 1,5 volte più veloce di Firecrawl in benchmark su 1K URL. 6 MB di RAM, binario singolo. Self-hosting o cloud gestito.
Recupero, ricerca e crawling web per agenti IA. Creato da zero in Rust. Senza chiavi, senza account. AGPL v3.
AI Scraper è uno strumento di scraping potente e un agente di scraping progettato per automatizzare l'estrazione di dati con una precisione ineguagliabile. Ideale per compiti di scraping AI scalabili su diverse fonti web, questo strumento semplifica le operazioni di scraping complesse in flussi di lavoro efficienti e intelligenti.
Una libreria Ruby versatile per il web spidering che può spiderare un sito, più domini, determinati link o infinitamente. Spidr è progettato per essere veloce e facile da usare.
100% gratuito e alternativa open-source completa a Firecrawl edge con estrazione link migliore per agenti - che puoi deployare su Cloudflare o Vercel da solo.
Guide rapide di Python per sfruttare al meglio la prova gratuita dell'API Web Scraper di Oxylabs.
API all-in-one per il web scraping e l’estrazione di dati su larga scala in tempo reale: proxy, gestione dei CAPTCHA, rendering JavaScript e parsing in un’unica richiesta, con risultati in HTML o JSON strutturato.
Domande frequenti
Qual è il repository #web-scraper più popolare su GitHub?
Il progetto open source #web-scraper più alto in classifica su GitHub è firecrawl/firecrawl, con 205,758 stelle. Infrastruttura di conoscenza per rendere più intelligenti i tuoi agenti. Cerca, estrai e accedi a oltre 550 fornitori di dati tramite un’unica API.
Quali linguaggi di programmazione sono più utilizzati nei repository #web-scraper?
Tra i progetti #web-scraper più alti in classifica su GitHub, i linguaggi di programmazione più comuni sono Python, TypeScript, Rust, Go.
Come viene calcolata la classifica dei repository #web-scraper?
Monitoriamo 36 repository open source attivi contrassegnati con #web-scraper (500+ stelle), per un totale di 565,282 stelle e una media di 15,702 stelle per repository. Le classifiche vengono aggiornate quotidianamente tramite l’API di GitHub.