#web-scraping Repository
382 repository in totale
Taobao, Tmall sconti dimezzati, acquista TV, acquista Maotai, sconfiggi i bagarini
Il repository di hosting delle regole di Kazumi, i contributi sono i benvenuti ^โข๏ปโข^
AIMedia รจ un software integrato che acquisisce automaticamente i trend, crea articoli con AI e li pubblica automaticamente. Supporta Toutiao, Xiaohongshu, WeChat Official Accounts e altro.
Playwright invisibile: un Playwright che i sistemi anti-bot non possono rilevare, quindi niente CAPTCHA: stessa API, Firefox headless stealth con protezione anti-rilevamento, impronta digitale non rilevabile, aggira il rilevamento dei bot, scraping web e automazione del browser con Python.
Scraper gratuito e open source di Google Maps per la generazione di lead (Python, senza chiave API nรฉ Docker). Esporta in CSV nome, telefono, email, sito web, valutazione e link a Instagram/Facebook/LinkedIn/TikTok/YouTube/X. 100 luoghi con email in 44 s; --grid supera il limite di 120 imposto da Google. Verifica dei record MX delle email e rilevamento dei pixel pubblicitari. Skill per Claude Code, Codex e Cursor.
Estrazione rapida di contenuti web local-first per LLM. Scraping, crawling, estrazione dati strutturati โ tutto da Rust. CLI, REST API e server MCP.
Un parser HTML DOM. Ti permette di manipolare l'HTML. Trova tag in una pagina HTML con selettori proprio come jQuery.
Piattaforma di automazione del browser self-hosted e indetectabile. Alimentata da Camoufox (Firefox) con tasso di rilevamento zero. Progettata per velocitร , privacy e scalabilitร .
Chiamata di metodi del browser RPC (Remote Procedure Call), evitando di scrivere codice manualmente e configurare ambienti
Impara Python per i prossimi 30 (o giรน di lรฌ) giorni.
Tmall TaoBao iMaotai iMatoTai JD Jingdong acquisto lampo, Jingdong Maotai acquisto lampo versione Windows, pronto all'uso out-of-the-box senza configurazione ambiente. Sviluppo imminente (protocollo open source con Apache License)
Alternativa open source a Gemini Deep Research. Genera report con IA basati sui risultati di ricerca.
Una guida per estrarre titoli, autori e citazioni da Google Scholar utilizzando Python e l'API Oxylabs SERP Scraper.
Un codice per estrarre articoli bestseller, risultati di ricerca e offerte attualmente disponibili da Amazon utilizzando Python e l'API Oxylabs E-Commerce Scraper.
Sorgenti live IPv4 per TV di hotel raccolte automaticamente, test automatico della velocitร di riproduzione, aggiornamento automatico giornaliero. Include canali CCTV nazionali, canali satellitari e alcuni canali locali, riproduzione fluida. Puรฒ anche essere eseguito su OpenWrt o Docker di Synology.
Uno strumento veloce per convertire qualsiasi sito web in dati markdown pronti per LLM. Realizzato da https://supermemory.ai
Un framework di crawling Java semplice, agile e distribuito che supporta Spring Boot; Un framework di crawling agile e distribuito.
Parser intelligente per il catalogo "Chitai-Gorod". Raccolta e strutturazione dei dati ad alta velocitร basate su qualsiasi parametro specificato: dall'ISBN alle dinamiche di sconto.
net/http.Client come HTTP Client con opzioni per selezionare specifiche impronte digitali TLS del client da utilizzare per le richieste.
Acquisizione dati per i commenti della versione web di Douyin Live (ultima versione 2025)
QUESTO REPOSITORY ร SOLO UNO SPECCHIO! Il repository principale di sviluppo รจ https://codeberg.org/Freedium-cfd/web
SURF - Client HTTP Go avanzato con impersonificazione del browser Chrome/Firefox, HTTP/3 con fingerprinting QUIC, emulazione TLS JA3/JA4 e bypass anti-bot per automazione web e scraping.
Il driver headless di Chrome/Chromium basato su Puppeteer. Scatta screenshot, genera PDF, estrai testo e HTML con un'API pronta per la produzione.
qstock รจ stato sviluppato dal "Python Financial Quant" public account, con l'obiettivo di creare un pacchetto personale di analisi quantitativa per la ricerca sugli investimenti, attualmente comprendente moduli per l'acquisizione dati (data), la visualizzazione (plot), la selezione azionaria (stock) e il backtesting quantitativo (strategy backtest). qstock fornirร agli utenti un'interfaccia dati concisa e dati di mercato finanziari normalizzati. Il modulo di visualizzazione offrirร agli utenti un'interfaccia semplice per grafici interattivi basati sul web; il modulo di selezione azionaria fornirร dati di selezione azionaria da Tonghuashun e selezione azionaria personalizzata, inclusi RPS, trend MM, indicatori finanziari, modello di flusso di cassa, ecc.; il modulo di backtesting fornirร a tutti un framework e un modello di base vettorizzati (basati su pandas) e basati su eventi. Segui il "Python Financial Quant" public account di WeChat per ottenere maggiori informazioni sulle applicazioni.
Segui blog, wiki, canali YouTube, nonchรฉ account su Twitter, Instagram, ecc. da una singola pagina.
Scopri come creare il tuo scraper di Google Jobs che estrae contemporaneamente offerte di lavoro da Google per piรน query di ricerca e geolocalizzazioni con Python e l'API Google Jobs Scraper di Oxylabs. https://oxylabs.io/blog/how-to-scrape-google-jobs
Launcher gratuito e open source per browser anti-rilevamento, destinato al web scraping e alla gestione di piรน account. Del team ShardX (precedentemente ProxyShard). Spoofing dellโimpronta digitale a livello di motore in Chromium 158 (WebGL / WebGPU / Client Hints / caratteri / TLS), oltre 220 profili dispositivo inclusi e QUIC + WebRTC stabile tramite SOCKS5.
Recupera un intero sito e salvalo come file di testo (da utilizzare con modelli AI).
Condivisione di risorse cinematografiche e televisive su Baidu Netdisk, Quark Netdisk e Aliyun Drive. Pubblicazione quotidiana delle ultime serie TV, programmi di varietร e risorse cinematografiche.
Ottieni un indirizzo di collegamento diretto una tantum per Chengtong Cloud Drive
In questo tutorial, mostriamo come estrarre dati pubblici di Google con Python e l'API di Oxylabs.
Binding Python per i motori Modest e Lexbor. Analizzatore HTML5 veloce con selettori CSS per Python.
Strumento CLI per salvare una copia fedele di una pagina web completa in un singolo file HTML (basato su SingleFile)
Implementazione di selezione del testo, selezione di caratteri, selezione e riconoscimento di captcha touch-based, addestrato su PyTorch
Scraper di Twitter e X per Python: raccogli tweet, profili, follower, account seguiti e tendenze senza lโAPI ufficiale. Una libreria per lo scraping di Twitter con gestione di piรน account, supporto proxy e funzionalitร asincrone, oppure una versione ospitata su Apify.