Git Stars Git Stars

#crawl Dépôts

Découvrez 11 dépôts GitHub open source actifs associés à #crawl, cumulant 27,381 étoiles au total (soit une moyenne de 2,489 étoiles par projet). Le projet en tête de ce thème est kangvcar/InfoSpider, avec 8,275 étoiles.

11
Total des Dépôts
27,381
Nombre total d'étoiles
2,489
Moyenne d'Étoiles/Dépôt
1
kangvcar/InfoSpider

INFO-SPIDER est une boîte à outils crawler🧰 qui intègre de nombreuses sources de données, conçue pour aider les utilisateurs à récupérer leurs données de manière sûre et rapide. Le code de l'outil est open source et le processus est transparent. Les sources de données prises en charge comprennent GitHub, QQ Mail, Netease Mail, Ali Mail, Sina Mail, Hotmail, Outlook, JD, Taobao, Alipay, China Mobile, China Unicom, China Telecom, Zhihu, Bilibili, Netease Cloud Music, QQ Friends, QQ Groups, Génération d'albums WeChat Moments, Historique de navigation du navigateur, 12306, CSDN Blog, OSCHINA Blog, JianShu.

kangvcar
⭐ 8,275 Python 👤 kangvcar User 🕐 Mis à jour 2026-04-21 📅 Créé 2020-07-11
2
201206030/novel-plus

novel-plus est un CMS de romans complet et multiplateforme (PC, WAP, application et mini-programme). Il propose notamment des recommandations, une recherche et des classements de romans, la lecture, des bibliothèques, des critiques et des listes de lecture, la collecte automatique de romans sur le Web, un espace membres, un espace auteurs, des recharges et des abonnements, ainsi que la publication d’actualités.

201206030
⭐ 4,822 Java 👤 201206030 User 🕐 Mis à jour 2026-11-17 📅 Créé 2020-05-02
3
any4ai/AnyCrawl

AnyCrawl 🚀 : Un crawler Node.js/TypeScript qui transforme les sites Web en données prêtes pour les LLM et extrait des résultats SERP structurés de Google/Bing/Baidu/etc. Multi-threading natif pour le traitement en masse.

any4ai
⭐ 3,580 TypeScript 👤 any4ai User 🕐 Mis à jour 2026-11-12 📅 Créé 2025-03-31
4
ReaJason/xhs

Encapsulation des requêtes basée sur le terminal web de Xiaohongshu. https://reajason.github.io/xhs/

ReaJason
⭐ 2,177 Python 👤 ReaJason User 🕐 Mis à jour 2025-07-01 📅 Créé 2023-04-03
5
coder-hxl/x-crawl

Bibliothèque flexible de crawling pour Node.js

coder-hxl
⭐ 1,888 TypeScript 👤 coder-hxl User 🕐 Mis à jour 2026-11-21 📅 Créé 2023-01-22
6
ArchiveTeam/grab-site

Le robot d'exploration Web de l'archiviste : sortie WARC, tableau de bord pour tous les crawls, modèles d'ignorance dynamiques

ArchiveTeam
⭐ 1,572 Python 👤 ArchiveTeam Organization 🕐 Mis à jour 2025-05-23 📅 Créé 2015-02-05
7
tavily-ai/tavily-python

Le SDK Python Tavily permet une interaction facile avec l'API Tavily, offrant la pleine gamme de nos fonctionnalités de recherche, d'extraction, de crawling, de cartographie et de recherche directement depuis vos programmes Python. Intégrez facilement la recherche intelligente, l'extraction de contenu et les capacités de recherche dans vos applications, en exploitant les puissantes fonctionnalités de Tavily.

tavily-ai
⭐ 1,432 Python 👤 tavily-ai Organization 🕐 Mis à jour 2026-10-26 📅 Créé 2023-09-01
8
darbra/sperm

Un résumé d'excellents articles sur le rétro-ingénierie, à consulter

darbra
⭐ 1,427 👤 darbra User 🕐 Mis à jour 2026-04-13 📅 Créé 2022-03-02
9
LoseNine/Crack-JS-Spider

JS Reverse Engineering, décryptage des paramètres de cryptage anti-scraping JS, curseur Geetest W déjà décrypté (2022.2.19), QQ Music sign (2022.2.13), Pinduoduo anti_content, Boss Zhipin zp_token, Zhihu x-zse-96, Kugou kg_mid/dfid, Vipshop mars_cid, China Judgments Online (mis à jour le 2020-06-30), mot de passe Taobao, connexion Tianan Insurance, connexion Bilibili, connexion Fang.com, connexion WPS, connexion Weibo, Youdao Translate, connexion Netease, connexion WeChat Official Account, connexion Air China Network, connexion Jmubiao, connexion Student Information Management System, connexion Gengying Finance, connexion Chongqing Science and Technology Resource Sharing Platform, téléchargement Netease Cloud Music, analyse de lien vidéo en un clic, connexion Cailianshe.

LoseNine
⭐ 974 JavaScript 👤 LoseNine User 🕐 Mis à jour 2024-05-03 📅 Créé 2020-02-09
10
scrapfly/Antibot-Detector

Détection en temps réel des systèmes anti-bots, des captchas et des techniques de fingerprinting. Identifie Cloudflare, Akamai, DataDome, reCAPTCHA, hCaptcha, Shape Security et bien d’autres, avec un score de confiance et des outils de capture avancés.

scrapfly
⭐ 636 JavaScript 👤 scrapfly Organization 🕐 Mis à jour 2026-11-17 📅 Créé 2025-09-03
11
philschmid/clipper.js

Convertisseur et crawler HTML vers Markdown.

philschmid
⭐ 606 TypeScript 👤 philschmid User 🕐 Mis à jour 2024-01-09 📅 Créé 2023-09-27

Foire aux questions

1

Quel est le dépôt #crawl le plus populaire sur GitHub ?

Le projet #crawl open source le mieux classé sur GitHub est kangvcar/InfoSpider, avec 8,275 étoiles. INFO-SPIDER est une boîte à outils crawler🧰 qui intègre de nombreuses sources de données, conçue pour aider les utilisateurs à récupérer leurs données de manière sûre et rapide. Le code de l'outil est open source et le processus est transparent. Les sources de données prises en charge comprennent GitHub, QQ Mail, Netease Mail, Ali Mail, Sina Mail, Hotmail, Outlook, JD, Taobao, Alipay, China Mobile, China Unicom, China Telecom, Zhihu, Bilibili, Netease Cloud Music, QQ Friends, QQ Groups, Génération d'albums WeChat Moments, Historique de navigation du navigateur, 12306, CSDN Blog, OSCHINA Blog, JianShu.

2

Quels langages de programmation sont les plus utilisés dans les dépôts #crawl ?

Parmi les projets #crawl les mieux classés sur GitHub, les langages de programmation les plus courants sont Python, TypeScript, JavaScript, Java.

3

Comment le classement des dépôts #crawl est-il calculé ?

Nous suivons 11 dépôts open source actifs associés à #crawl (500+ étoiles), totalisant 27,381 étoiles, avec une moyenne de 2,489 étoiles par dépôt. Les classements sont mis à jour quotidiennement à partir de l’API GitHub.