Git Stars Git Stars

#crawl 仓库

探索 11 个标记为 #crawl 的活跃开源 GitHub 仓库,它们累计获得 27,381 个 Star(平均每个项目 2,489 个)。该主题的领先项目是 kangvcar/InfoSpider,拥有 8,275 个 Star。

11
仓库总数
27,381
总星标数
2,489
平均每个仓库星标数
1
kangvcar/InfoSpider

INFO-SPIDER 是一个集众多数据源于一身的爬虫工具箱🧰,旨在安全快捷的帮助用户拿回自己的数据,工具代码开源,流程透明。支持数据源包括GitHub、QQ邮箱、网易邮箱、阿里邮箱、新浪邮箱、Hotmail邮箱、Outlook邮箱、京东、淘宝、支付宝、中国移动、中国联通、中国电信、知乎、哔哩哔哩、网易云音乐、QQ好友、QQ群、生成朋友圈相册、浏览器浏览历史、12306、博客园、CSDN博客、开源中国博客、简书。

kangvcar
⭐ 8,275 Python 👤 kangvcar User 🕐 已更新 2026-04-21 📅 创建时间 2020-07-11
2
201206030/novel-plus

novel-plus 是一个支持多端(PC、WAP、APP、小程序)、功能完善的小说 CMS 系统。包括小说推荐、小说检索、小说排行、小说阅读、小说书架、小说书评、小说书单、小说爬虫、会员中心、作家专区、充值订阅、新闻发布等功能。

201206030
⭐ 4,822 Java 👤 201206030 User 🕐 已更新 2026-11-17 📅 创建时间 2020-05-02
3
any4ai/AnyCrawl

AnyCrawl 🚀: 一个 Node.js/TypeScript 爬虫,可将网站转换为 LLM 就绪数据,并从 Google/Bing/Baidu/等提取结构化的 SERP 结果。支持原生多线程进行批量处理。

any4ai
⭐ 3,580 TypeScript 👤 any4ai User 🕐 已更新 2026-11-12 📅 创建时间 2025-03-31
4
ReaJason/xhs

基于小红书 Web 端进行的请求封装。https://reajason.github.io/xhs/

ReaJason
⭐ 2,177 Python 👤 ReaJason User 🕐 已更新 2025-07-01 📅 创建时间 2023-04-03
5
coder-hxl/x-crawl

灵活的 Node.js 爬虫库

coder-hxl
⭐ 1,888 TypeScript 👤 coder-hxl User 🕐 已更新 2026-11-21 📅 创建时间 2023-01-22
6
ArchiveTeam/grab-site

档案管理员的爬虫:WARC 输出,所有爬取内容的仪表板,动态忽略模式

ArchiveTeam
⭐ 1,572 Python 👤 ArchiveTeam Organization 🕐 已更新 2025-05-23 📅 创建时间 2015-02-05
7
tavily-ai/tavily-python

Tavily Python SDK 可轻松与 Tavily API 进行交互,直接从您的 Python 程序中提供我们搜索、提取、爬取、映射和研究功能的完整范围。轻松将智能搜索、内容提取和研究功能集成到您的应用程序中,利用 Tavily 的强大功能。

tavily-ai
⭐ 1,432 Python 👤 tavily-ai Organization 🕐 已更新 2026-10-26 📅 创建时间 2023-09-01
8
darbra/sperm

浏览过的精彩逆向文章汇总,值得一看

darbra
⭐ 1,427 👤 darbra User 🕐 已更新 2026-04-13 📅 创建时间 2022-03-02
9
LoseNine/Crack-JS-Spider

JS破解逆向,破解JS反爬虫加密参数,已破解极验滑块w(2022.2.19),QQ音乐sign(2022.2.13),拼多多anti_content,boss直聘zp_token,知乎x-zse-96,酷狗kg_mid/dfid,唯品会mars_cid,中国裁判文书网(2020-06-30更新),淘宝密码,天安保险登录,b站登录,房天下登录,WPS登录,微博登录,有道翻译,网易登录,微信公众号登录,空中网登录,今目标登录,学生信息管理系统登录,共赢金融登录,重庆科技资源共享平台登录,网易云音乐下载,一键解析视频链接,财联社登录。

LoseNine
⭐ 974 JavaScript 👤 LoseNine User 🕐 已更新 2024-05-03 📅 创建时间 2020-02-09
10
scrapfly/Antibot-Detector

实时检测反机器人系统、验证码和指纹识别技术。可识别 Cloudflare、Akamai、DataDome、reCAPTCHA、hCaptcha、Shape Security 等,并提供置信度评分和高级捕获工具。

scrapfly
⭐ 636 JavaScript 👤 scrapfly Organization 🕐 已更新 2026-11-17 📅 创建时间 2025-09-03
11
philschmid/clipper.js

HTML到Markdown的转换器和爬虫。

philschmid
⭐ 606 TypeScript 👤 philschmid User 🕐 已更新 2024-01-09 📅 创建时间 2023-09-27

常见问题解答

1

GitHub 上最受欢迎的 #crawl 仓库是什么?

GitHub 上排名第一的开源 #crawl 项目是 kangvcar/InfoSpider,拥有 8,275 个 Star。INFO-SPIDER 是一个集众多数据源于一身的爬虫工具箱🧰,旨在安全快捷的帮助用户拿回自己的数据,工具代码开源,流程透明。支持数据源包括GitHub、QQ邮箱、网易邮箱、阿里邮箱、新浪邮箱、Hotmail邮箱、Outlook邮箱、京东、淘宝、支付宝、中国移动、中国联通、中国电信、知乎、哔哩哔哩、网易云音乐、QQ好友、QQ群、生成朋友圈相册、浏览器浏览历史、12306、博客园、CSDN博客、开源中国博客、简书。

2

#crawl 仓库中最常使用的编程语言有哪些?

在 GitHub 上排名靠前的 #crawl 项目中,最常见的编程语言是 Python, TypeScript, JavaScript, Java。

3

#crawl 仓库的排名是如何计算的?

我们跟踪了 11 个标记为 #crawl 且拥有 500+ 个 Star 的活跃开源仓库,共计获得 27,381 个 Star,平均每个仓库拥有 2,489 个 Star。排名每日根据 GitHub API 更新。