Git Stars Git Stars

#crawl Repository

Scopri 11 repository GitHub open source attivi contrassegnati con #crawl, che raccolgono un totale di 27,381 stelle (con una media di 2,489 stelle per progetto). Il progetto leader di questo argomento è kangvcar/InfoSpider, con 8,275 stelle.

11
Totale Repository
27,381
Totale stelle
2,489
Media Stelle/Repo
Linguaggi di programmazione: Python TypeScript JavaScript Java

11 repository in totale

1
kangvcar/InfoSpider

INFO-SPIDER è una toolbox crawler🧰 che integra numerose fonti di dati, progettata per aiutare gli utenti a recuperare in modo sicuro e rapido i propri dati. Il codice dello strumento è open source e il processo è trasparente. Le fonti di dati supportate includono GitHub, QQ Mail, Netease Mail, Ali Mail, Sina Mail, Hotmail, Outlook, JD, Taobao, Alipay, China Mobile, China Unicom, China Telecom, Zhihu, Bilibili, Netease Cloud Music, QQ Friends, QQ Groups, Generazione di album di WeChat Moments, Cronologia di navigazione del browser, 12306, CSDN Blog, OSCHINA Blog, JianShu.

kangvcar
⭐ 8,275 Python 👤 kangvcar User 🕐 Aggiornato 2026-04-21 📅 Creato 2020-07-11
2
201206030/novel-plus

novel-plus è un CMS per romanzi ricco di funzionalità e compatibile con più piattaforme (PC, WAP, app e mini-programmi). Include consigli, ricerca e classifiche di romanzi, lettura, librerie, recensioni ed elenchi di lettura, acquisizione automatica di romanzi dal Web, un centro membri, una sezione autori, ricariche e abbonamenti, nonché la pubblicazione di notizie.

201206030
⭐ 4,822 Java 👤 201206030 User 🕐 Aggiornato 2026-11-17 📅 Creato 2020-05-02
3
any4ai/AnyCrawl

AnyCrawl 🚀: Un crawler Node.js/TypeScript che trasforma i siti web in dati pronti per LLM ed estrae risultati SERP strutturati da Google/Bing/Baidu/ecc. Multi-threading nativo per l'elaborazione in blocco.

any4ai
⭐ 3,580 TypeScript 👤 any4ai User 🕐 Aggiornato 2026-11-12 📅 Creato 2025-03-31
4
ReaJason/xhs

Wrapper delle richieste basato sull'interfaccia web di Xiaohongshu. https://reajason.github.io/xhs/

ReaJason
⭐ 2,177 Python 👤 ReaJason User 🕐 Aggiornato 2025-07-01 📅 Creato 2023-04-03
5
coder-hxl/x-crawl

Libreria flessibile per il crawling in Node.js

coder-hxl
⭐ 1,888 TypeScript 👤 coder-hxl User 🕐 Aggiornato 2026-11-21 📅 Creato 2023-01-22
6
ArchiveTeam/grab-site

Il web crawler dell'archivista: output WARC, dashboard per tutti i crawl, pattern di ignorazione dinamici

ArchiveTeam
⭐ 1,572 Python 👤 ArchiveTeam Organization 🕐 Aggiornato 2025-05-23 📅 Creato 2015-02-05
7
tavily-ai/tavily-python

L'SDK Python di Tavily consente un'interazione facile con l'API di Tavily, offrendo l'intera gamma delle nostre funzionalità di ricerca, estrazione, crawling, mappatura e ricerca direttamente dai tuoi programmi Python. Integra facilmente ricerca intelligente, estrazione di contenuti e capacità di ricerca nelle tue applicazioni, sfruttando le potenti funzionalità di Tavily.

tavily-ai
⭐ 1,432 Python 👤 tavily-ai Organization 🕐 Aggiornato 2026-10-26 📅 Creato 2023-09-01
8
darbra/sperm

Una raccolta di brillanti articoli di reverse engineering, da non perdere

darbra
⭐ 1,427 👤 darbra User 🕐 Aggiornato 2026-04-13 📅 Creato 2022-03-02
9
LoseNine/Crack-JS-Spider

JS Reverse Engineering, decodifica dei parametri di crittografia anti-scraping JS, già decodificato cursore Geetest W (2022.2.19), QQ Music sign (2022.2.13), Pinduoduo anti_content, Boss Zhipin zp_token, Zhihu x-zse-96, Kugou kg_mid/dfid, Vipshop mars_cid, China Judgments Online (aggiornato il 2020-06-30), password Taobao, login Tianan Insurance, login Bilibili, login Fang.com, login WPS, login Weibo, Youdao Translate, login Netease, login WeChat Official Account, login Air China Network, login Jmubiao, login Student Information Management System, login Gengying Finance, login Chongqing Science and Technology Resource Sharing Platform, download Netease Cloud Music, parsing link video con un clic, login Cailianshe.

LoseNine
⭐ 974 JavaScript 👤 LoseNine User 🕐 Aggiornato 2024-05-03 📅 Creato 2020-02-09
10
scrapfly/Antibot-Detector

Rilevamento in tempo reale di sistemi anti-bot, captcha e tecniche di fingerprinting. Identifica Cloudflare, Akamai, DataDome, reCAPTCHA, hCaptcha, Shape Security e altri, con punteggio di affidabilità e strumenti avanzati di acquisizione.

scrapfly
⭐ 636 JavaScript 👤 scrapfly Organization 🕐 Aggiornato 2026-11-17 📅 Creato 2025-09-03
11
philschmid/clipper.js

Convertitore e crawler da HTML a Markdown.

philschmid
⭐ 606 TypeScript 👤 philschmid User 🕐 Aggiornato 2024-01-09 📅 Creato 2023-09-27

Domande frequenti

1

Qual è il repository #crawl più popolare su GitHub?

Il progetto open source #crawl più alto in classifica su GitHub è kangvcar/InfoSpider, con 8,275 stelle. INFO-SPIDER è una toolbox crawler🧰 che integra numerose fonti di dati, progettata per aiutare gli utenti a recuperare in modo sicuro e rapido i propri dati. Il codice dello strumento è open source e il processo è trasparente. Le fonti di dati supportate includono GitHub, QQ Mail, Netease Mail, Ali Mail, Sina Mail, Hotmail, Outlook, JD, Taobao, Alipay, China Mobile, China Unicom, China Telecom, Zhihu, Bilibili, Netease Cloud Music, QQ Friends, QQ Groups, Generazione di album di WeChat Moments, Cronologia di navigazione del browser, 12306, CSDN Blog, OSCHINA Blog, JianShu.

2

Quali linguaggi di programmazione sono più utilizzati nei repository #crawl?

Tra i progetti #crawl più alti in classifica su GitHub, i linguaggi di programmazione più comuni sono Python, TypeScript, JavaScript, Java.

3

Come viene calcolata la classifica dei repository #crawl?

Monitoriamo 11 repository open source attivi contrassegnati con #crawl (500+ stelle), per un totale di 27,381 stelle e una media di 2,489 stelle per repository. Le classifiche vengono aggiornate quotidianamente tramite l’API di GitHub.