Git Stars Git Stars

#crawler Repositorios

162
Total de Repositorios
1.1M
Total de estrellas
6,863
Promedio de Estrellas/Repo

162 repositorios en total

151
fengzhizi715/NetDiscovery

NetDiscovery es un framework/middleware de rastreo de propósito general implementado basado en frameworks como Vert.x y RxJava 2.

fengzhizi715
⭐ 643 Java 👤 fengzhizi715 User 🕐 Actualizado 2026-06-05 📅 Creado 2017-11-26
152
cv-cat/catbus

Un solo comando para usar Xiaohongshu, Douyin, TikTok, Bilibili, Kuaishou, Weibo, Xianyu, Taobao, JD.com y X: comandos unificados y salida JSON para personas y agentes de IA

cv-cat
⭐ 641 TypeScript 👤 cv-cat User 🕐 Actualizado 2026-11-20 📅 Creado 2026-09-27
153
rajatomar788/pywebcopy

Guarda páginas web localmente en tu disco duro con imágenes, CSS, JS y enlaces tal como están.

rajatomar788
⭐ 639 Python 👤 rajatomar788 User 🕐 Actualizado 2025-05-13 📅 Creado 2018-07-23
154
scrapfly/Antibot-Detector

Detección en tiempo real de sistemas antibots, captchas y técnicas de fingerprinting. Identifica Cloudflare, Akamai, DataDome, reCAPTCHA, hCaptcha, Shape Security y más, con puntuación de confianza y herramientas avanzadas de captura.

scrapfly
⭐ 636 JavaScript 👤 scrapfly Organization 🕐 Actualizado 2026-11-17 📅 Creado 2025-09-03
155
yhy0/Jie

Jie se destaca como una herramienta integral de evaluación de seguridad y explotación meticulosamente diseñada para aplicaciones web. Su robusto conjunto de funciones abarca escaneo de vulnerabilidades, recopilación de información y explotación, lo que la convierte en un kit de herramientas indispensable tanto para profesionales de la seguridad como para pentesters. 挖洞辅助工具(漏洞扫描、信息收集)

yhy0
⭐ 599 Go 👤 yhy0 User 🕐 Actualizado 2024-07-05 📅 Creado 2023-01-30
156
CharlesPikachu/freeproxy

FreeProxy: Recopilando proxies gratuitos de internet. (Gran cantidad de proxies gratuitos de alta calidad en todo el mundo, compatible con el rastreo de docenas de fuentes de intercambio de proxies gratuitos, filtrado de proxies con reglas personalizadas, esencial para el web scraping y el análisis de datos, actualizado diariamente con una gran cantidad de proxies gratuitos.)

CharlesPikachu
⭐ 594 Python 👤 CharlesPikachu User 🕐 Actualizado 2026-11-21 📅 Creado 2018-10-29
157
vakra-dev/reader

Infraestructura web de código abierto para IA. Raspado, rastreo y automatización de la web, limpieza de markdown, sesiones de navegador, listo para tus agentes.

vakra-dev
⭐ 577 TypeScript 👤 vakra-dev Organization 🕐 Actualizado 2026-10-06 📅 Creado 2026-01-07
158
zhuyingda/webster

Un framework confiable de alto nivel para web crawling y scraping para Node.js.

zhuyingda
⭐ 560 JavaScript 👤 zhuyingda User 🕐 Actualizado 2025-03-12 📅 Creado 2017-11-04
159
MikeMeliz/TorCrawl.py

Rastrear y extraer páginas web (normales u onion) a través de la red TOR

MikeMeliz
⭐ 550 Python 👤 MikeMeliz User 🕐 Actualizado 2026-06-29 📅 Creado 2016-12-05
160
dirtyfilthy/freshonions-torscraper

Fresh Onions es un rastreador web de TOR de código abierto / rastreador de servicios ocultos onion, alojado en zlal32teyptf4tvi.onion

dirtyfilthy
⭐ 543 Python 👤 dirtyfilthy User 🕐 Actualizado 2026-11-19 📅 Creado 2017-02-15
161
dengmeiluan/ticket-monitoring

✈️ Monitorización de tarifas aéreas autohospedada y multicanal: recopilación de detalles de vuelos → avisos con texto e imágenes por DingTalk → alertas intensivas en cuatro niveles cuando se cumplen los objetivos. Las rutas nacionales e internacionales (con destinos en los cinco continentes) comparten el mismo flujo de recopilación, evaluación y notificación. Los datos permanecen en tu equipo, toda la configuración se gestiona desde la web y es de código abierto y gratuita.

dengmeiluan
⭐ 528 Python 👤 dengmeiluan User 🕐 Actualizado 2026-11-18 📅 Creado 2026-09-15
162
AlexMathew/scrapple

Un marco para la creación de extractores de contenido web semiautomáticos

AlexMathew
⭐ 506 Python 👤 AlexMathew User 🕐 Actualizado 2026-01-16 📅 Creado 2014-12-13