Git Stars Git Stars

#crawl Repositórios

Descubra 11 repositórios ativos de código aberto no GitHub marcados com #crawl, acumulando um total de 27,381 estrelas (uma média de 2,489 por projeto). O líder deste tópico é kangvcar/InfoSpider, com 8,275 estrelas.

11
Total de Repositórios
27,381
Total de estrelas
2,489
Média de Estrelas/Repositório
Linguagens de programação: Python TypeScript JavaScript Java

11 repositórios no total

1
kangvcar/InfoSpider

INFO-SPIDER é uma caixa de ferramentas de web scraping que reúne múltiplas fontes de dados 🧰, projetada para ajudar os usuários a recuperar seus próprios dados de forma segura e rápida. O código da ferramenta é de código aberto e os processos são transparentes. As fontes de dados suportadas incluem GitHub, QQ Mail, NetEase Mail, Alibaba Mail, Sina Mail, Hotmail, Outlook Mail, JD.com, Taobao, Alipay, China Mobile, China Unicom, China Telecom, Zhihu, Bilibili, NetEase Cloud Music, QQ Friends, QQ Groups, geração de álbuns de Momentos, histórico de navegação do navegador, 12306, CSDN Blog, OSChina Blog, JianShu.

kangvcar
⭐ 8,275 Python 👤 kangvcar User 🕐 Atualizado 2026-04-21 📅 Criado 2020-07-11
2
201206030/novel-plus

novel-plus é um CMS de romances repleto de funcionalidades e compatível com várias plataformas (PC, WAP, aplicativo e miniprograma). Inclui recomendações, busca e rankings de romances; leitura, estantes, resenhas e listas de leitura; coleta automática de romances na Web; central de membros e área para escritores; recargas e assinaturas; e publicação de notícias.

201206030
⭐ 4,822 Java 👤 201206030 User 🕐 Atualizado 2026-11-17 📅 Criado 2020-05-02
3
any4ai/AnyCrawl

AnyCrawl 🚀: Um rastreador Node.js/TypeScript que transforma sites em dados prontos para LLM e extrai resultados SERP estruturados do Google/Bing/Baidu/etc. Multi-threading nativo para processamento em massa.

any4ai
⭐ 3,580 TypeScript 👤 any4ai User 🕐 Atualizado 2026-11-12 📅 Criado 2025-03-31
4
ReaJason/xhs

Encapsulamento de requisições baseado na versão web do Xiaohongshu. https://reajason.github.io/xhs/

ReaJason
⭐ 2,177 Python 👤 ReaJason User 🕐 Atualizado 2025-07-01 📅 Criado 2023-04-03
5
coder-hxl/x-crawl

Biblioteca flexível de rastreamento para Node.js

coder-hxl
⭐ 1,888 TypeScript 👤 coder-hxl User 🕐 Atualizado 2026-11-21 📅 Criado 2023-01-22
6
ArchiveTeam/grab-site

O rastreador web do arquivista: saída WARC, painel para todos os rastreamentos, padrões dinâmicos de ignorar

ArchiveTeam
⭐ 1,572 Python 👤 ArchiveTeam Organization 🕐 Atualizado 2025-05-23 📅 Criado 2015-02-05
7
tavily-ai/tavily-python

O SDK Python da Tavily permite uma interação fácil com a API da Tavily, oferecendo toda a gama de nossas funcionalidades de pesquisa, extração, rastreamento, mapeamento e pesquisa diretamente dos seus programas Python. Integre facilmente pesquisa inteligente, extração de conteúdo e capacidades de pesquisa em suas aplicações, aproveitando os poderosos recursos da Tavily.

tavily-ai
⭐ 1,432 Python 👤 tavily-ai Organization 🕐 Atualizado 2026-10-26 📅 Criado 2023-09-01
8
darbra/sperm

Compilação de artigos incríveis sobre engenharia reversa que você já viu, vale a pena conferir.

darbra
⭐ 1,427 👤 darbra User 🕐 Atualizado 2026-04-13 📅 Criado 2022-03-02
9
LoseNine/Crack-JS-Spider

Quebra de engenharia reversa de JS, quebra de parâmetros de criptografia anti-rastreamento de JS, Geetest Slider quebrado (2022.2.19), QQ Music sign (2022.2.13), Pinduoduo anti_content, Boss Zhipin zp_token, Zhihu x-zse-96, Kugou kg_mid/dfid, Vipshop mars_cid, China Judgements Online (atualizado em 2020-06-30), senha do Taobao, login da Tianan Insurance, login do Bilibili, login do SouFun, login do WPS, login do Weibo, Youdao Translate, login do NetEase, login da conta oficial do WeChat, login da Airuankong, login do Jinmobiao, login do sistema de gerenciamento de informações estudantis, login do Gongying Finance, login da Plataforma de Compartilhamento de Recursos Científicos e Tecnológicos de Chongqing, download do NetEase Cloud Music, análise de links de vídeo com um clique, login da Cailianshe.

LoseNine
⭐ 974 JavaScript 👤 LoseNine User 🕐 Atualizado 2024-05-03 📅 Criado 2020-02-09
10
scrapfly/Antibot-Detector

Deteção em tempo real de sistemas antibot, captchas e técnicas de fingerprinting. Identifica Cloudflare, Akamai, DataDome, reCAPTCHA, hCaptcha, Shape Security e muito mais, com pontuação de confiança e ferramentas avançadas de captura.

scrapfly
⭐ 636 JavaScript 👤 scrapfly Organization 🕐 Atualizado 2026-11-17 📅 Criado 2025-09-03
11
philschmid/clipper.js

Conversor e rastreador de HTML para Markdown.

philschmid
⭐ 606 TypeScript 👤 philschmid User 🕐 Atualizado 2024-01-09 📅 Criado 2023-09-27

Perguntas Frequentes

1

Qual é o repositório de #crawl mais popular no GitHub?

O projeto de código aberto de #crawl mais bem classificado no GitHub é kangvcar/InfoSpider, com 8,275 estrelas. INFO-SPIDER é uma caixa de ferramentas de web scraping que reúne múltiplas fontes de dados 🧰, projetada para ajudar os usuários a recuperar seus próprios dados de forma segura e rápida. O código da ferramenta é de código aberto e os processos são transparentes. As fontes de dados suportadas incluem GitHub, QQ Mail, NetEase Mail, Alibaba Mail, Sina Mail, Hotmail, Outlook Mail, JD.com, Taobao, Alipay, China Mobile, China Unicom, China Telecom, Zhihu, Bilibili, NetEase Cloud Music, QQ Friends, QQ Groups, geração de álbuns de Momentos, histórico de navegação do navegador, 12306, CSDN Blog, OSChina Blog, JianShu.

2

Quais linguagens de programação são mais usadas nos repositórios de #crawl?

Entre os projetos de #crawl mais bem classificados no GitHub, as linguagens de programação mais comuns são Python, TypeScript, JavaScript, Java.

3

Como é calculada a classificação dos repositórios de #crawl?

Acompanhamos 11 repositórios ativos de código aberto marcados com #crawl (com mais de 500 estrelas), totalizando 27,381 estrelas e uma média de 2,489 estrelas por repositório. As classificações são atualizadas diariamente a partir da API do GitHub.