Git Stars Git Stars

#crawler Repositorios

162
Total de Repositorios
1.1M
Total de estrellas
6,863
Promedio de Estrellas/Repo

162 repositorios en total

51
thewhiteh4t/FinalRecon

Reconocimiento Web Todo en Uno

thewhiteh4t
⭐ 3,058 Python 👤 thewhiteh4t User 🕐 Actualizado 2026-10-31 📅 Creado 2019-03-28
52
Qianlitp/crawlergo

Un potente rastreador de navegador para escáneres de vulnerabilidades web

Qianlitp
⭐ 3,034 Go 👤 Qianlitp User 🕐 Actualizado 2025-03-11 📅 Creado 2019-12-25
53
facundoolano/google-play-scraper

Scraper de Node.js para obtener datos de Google Play

facundoolano
⭐ 3,005 JavaScript 👤 facundoolano User 🕐 Actualizado 2026-10-17 📅 Creado 2015-04-07
54
howie6879/owllook

owllook-Motor de búsqueda de novelas

howie6879
⭐ 2,900 Python 👤 howie6879 User 🕐 Actualizado 2026-10-30 📅 Creado 2017-02-18
55
CharlesPikachu/DecryptLogin

DecryptLogin: APIs para iniciar sesión en algunos sitios web usando requests.

CharlesPikachu
⭐ 2,871 Python 👤 CharlesPikachu User 🕐 Actualizado 2024-08-09 📅 Creado 2019-02-25
56
spider-rs/spider

Recopilación de datos web de baja latencia y fundamentos en Rust

spider-rs
⭐ 2,856 Rust 👤 spider-rs Organization 🕐 Actualizado 2026-11-20 📅 Creado 2018-01-07
57
jaeles-project/gospider

Gospider - Araña web rápida escrita en Go

jaeles-project
⭐ 2,851 Go 👤 jaeles-project Organization 🕐 Actualizado 2024-04-21 📅 Creado 2020-01-22
58
spatie/crawler

https://spatie.be/docs/crawler

spatie
⭐ 2,827 PHP 👤 spatie Organization 🕐 Actualizado 2026-11-05 📅 Creado 2015-11-02
59
geziyor/geziyor

Geziyor, framework de web crawling y scraping ultrarrápido para Go. Soporta renderizado JS.

geziyor
⭐ 2,781 Go 👤 geziyor Organization 🕐 Actualizado 2026-07-02 📅 Creado 2019-06-06
60
jae-jae/QueryList

:spider: ¡El framework de crawler PHP progresivo! Framework de recolección PHP progresivo elegante.

jae-jae
⭐ 2,689 PHP 👤 jae-jae User 🕐 Actualizado 2026-10-20 📅 Creado 2015-12-20
61
Autumn-27/ScopeSentry

ScopeSentry-Mapeo del ciberespacio, enumeración de subdominios, escaneo de puertos, descubrimiento de información sensible, escaneo de vulnerabilidades, nodos distribuidos

Autumn-27
⭐ 2,597 Go 👤 Autumn-27 User 🕐 Actualizado 2026-10-11 📅 Creado 2024-02-27
62
xtuhcy/gecco

Rastreador web ligero fácil de usar

xtuhcy
⭐ 2,510 Java 👤 xtuhcy User 🕐 Actualizado 2026-10-09 📅 Creado 2015-12-12
63
fhamborg/news-please

news-please - Un rastreador web integrado y extractor de información para noticias que simplemente funciona

fhamborg
⭐ 2,494 Python 👤 fhamborg User 🕐 Actualizado 2026-04-14 📅 Creado 2016-12-18
64
lorien/grab

Marco de Web Scraping

lorien
⭐ 2,461 Python 👤 lorien User 🕐 Actualizado 2025-09-19 📅 Creado 2013-05-01
65
JayBizzle/Crawler-Detect

🕷 CrawlerDetect es una clase PHP para detectar bots/crawlers/spiders a través del agente de usuario

JayBizzle
⭐ 2,410 PHP 👤 JayBizzle User 🕐 Actualizado 2026-11-16 📅 Creado 2015-03-23
66
friuns2/Leaked-GPTs

Los prompts filtrados de GPTs eluden el límite de 25 mensajes o para probar GPTs sin una suscripción Plus.

friuns2
⭐ 2,396 Python 👤 friuns2 User 🕐 Actualizado 2024-01-17 📅 Creado 2023-11-27
67
sjdirect/abot

Framework de rastreo web C# multiplataforma creado para la velocidad y la flexibilidad. ¡Por favor, dale una estrella a este proyecto! +1.

sjdirect
⭐ 2,308 C# 👤 sjdirect User 🕐 Actualizado 2026-07-17 📅 Creado 2013-08-08
68
goclone-dev/goclone

Website Cloner - Utiliza potentes rutinas de Go para clonar sitios web en tu ordenador en cuestión de segundos.

goclone-dev
⭐ 2,303 Go 👤 goclone-dev Organization 🕐 Actualizado 2026-06-02 📅 Creado 2020-03-23
69
AAndyProgram/SCrawler

Descargador de medios de cualquier sitio, incluyendo Twitter, Reddit, Instagram, BlueSky, TikTok, Threads, Facebook, OnlyFans, YouTube, Pinterest, PornHub, XHamster, XVIDEOS, ThisVid etc.

AAndyProgram
⭐ 2,263 Visual Basic .NET 👤 AAndyProgram User 🕐 Actualizado 2026-11-08 📅 Creado 2021-12-07
70
watercrawl/WaterCrawl

Transformar contenido web en datos listos para LLM

watercrawl
⭐ 2,244 TypeScript 👤 watercrawl Organization 🕐 Actualizado 2026-08-17 📅 Creado 2024-12-15
71
zorlan/skycaiji

Blue Sky Collector es un sistema de rastreo de código abierto y gratuito que solo requiere hacer clic y editar reglas para recopilar datos. Puede ejecutarse localmente, en un host virtual o en un servidor en la nube, y puede rastrear casi todo tipo de páginas web. Se integra perfectamente con varios programas de creación de sitios web CMS, publica datos en tiempo real sin iniciar sesión y sin intervención humana. ¡Es un sistema de rastreo en la nube completamente multiplataforma en el software de recopilación de big data web.

zorlan
⭐ 2,098 PHP 👤 zorlan User 🕐 Actualizado 2026-10-07 📅 Creado 2018-02-26
72
TeamNewPipe/NewPipeExtractor

La biblioteca principal de NewPipe para extraer datos de sitios de streaming

TeamNewPipe
⭐ 2,070 Java 👤 TeamNewPipe Organization 🕐 Actualizado 2026-11-19 📅 Creado 2017-03-01
73
elliotgao2/gain

Marco de rastreo web basado en asyncio.

elliotgao2
⭐ 2,017 Python 👤 elliotgao2 User 🕐 Actualizado 2026-08-09 📅 Creado 2017-05-31
74
coder-hxl/x-crawl

Biblioteca flexible de rastreo para Node.js

coder-hxl
⭐ 1,888 TypeScript 👤 coder-hxl User 🕐 Actualizado 2026-11-21 📅 Creado 2023-01-22
75
JSREI/ast-hook-for-js-RE

Solución de itinerancia de memoria del navegador (en exploración...)

JSREI
⭐ 1,882 JavaScript 👤 JSREI Organization 🕐 Actualizado 2024-05-07 📅 Creado 2021-01-15
76
lixi5338619/lxSpider

Colección de casos de rastreo web. Incluyendo, pero no limitado a "Taobao, JD.com, Tmall, Douban, Douyin, Kuaishou, Weibo, WeChat, Alibaba, Toutiao, PDD, Youku, iQIYI, Ctrip, 12306, 58, Sohu, varios índices, VIP, Wanfang, ZLibrary, Oalib, Novelas, sitios de licitaciones, sitios de adquisiciones, Xiaohongshu, Dianping, Twitter, Maimai, Zhihu"

lixi5338619
⭐ 1,876 Python 👤 lixi5338619 User 🕐 Actualizado 2024-05-09 📅 Creado 2021-01-29
77
diskoverdata/diskover-community

Diskover Community Edition - Indexador de archivos de código abierto, motor de búsqueda de archivos y gestión y análisis de datos impulsado por Elasticsearch

diskoverdata
⭐ 1,831 PHP 👤 diskoverdata Organization 🕐 Actualizado 2026-03-25 📅 Creado 2017-04-19
78
eatmoreduck/boss-zhipin-scraper

Scraper de BOSS Zhipin / Herramienta de extracción de datos de empleo de BOSS Zhipin, basada en el protocolo Chrome CDP para reutilizar sesiones de inicio de sesión reales, eludir la protección anti-scraping de fuentes y generar JSON/CSV de salarios en texto plano + análisis de habilidades salariales.

eatmoreduck
⭐ 1,781 Python 👤 eatmoreduck User 🕐 Actualizado 2026-11-03 📅 Creado 2026-06-11
79
u3c3/BT-btt

Presentación del sitio magnético U3C3 y actualización de dominio

u3c3
⭐ 1,779 👤 u3c3 User 🕐 Actualizado 2025-01-01 📅 Creado 2020-04-28
80
howie6879/ruia

Microframework asíncrono de scraping web para Python 3.6+ basado en asyncio

howie6879
⭐ 1,738 Python 👤 howie6879 User 🕐 Actualizado 2026-10-30 📅 Creado 2018-07-10
81
rushter/selectolax

Enlace de Python a los motores Modest y Lexbor. Analizador rápido de HTML5 con selectores CSS para Python.

rushter
⭐ 1,717 Python 👤 rushter User 🕐 Actualizado 2026-11-10 📅 Creado 2017-11-26
82
gildas-lormeau/single-file-cli

Herramienta CLI para guardar una copia fiel de una página web completa en un único archivo HTML (basado en SingleFile)

gildas-lormeau
⭐ 1,702 JavaScript 👤 gildas-lormeau User 🕐 Actualizado 2026-11-18 📅 Creado 2022-05-31
83
YoongiKim/AutoCrawler

Google, Naver rastreador web de imágenes multiproceso (Selenium)

YoongiKim
⭐ 1,700 Python 👤 YoongiKim User 🕐 Actualizado 2026-11-12 📅 Creado 2018-11-21
84
orangecoding/fredy

❤️ Fredy - [F]ind [R]eal [E]state [D]amn Eas[y] (encuentra propiedades inmobiliarias de verdad de forma muy fácil) - Fredy sigue buscando nuevos apartamentos, casas y pisos en Europa en plataformas como ImmoScout24, Immowelt y eBay Kleinanzeigen, y te envía los resultados al instante a través de Slack, Telegram, correo electrónico, Discord o ntfy, para que puedas centrarte en las cosas más importantes de la vida ;)

orangecoding
⭐ 1,648 JavaScript 👤 orangecoding User 🕐 Actualizado 2026-11-19 📅 Creado 2018-01-15
85
erma0/douyin

Crawler de Douyin: recopilación de datos públicos como la página de perfil de la cuenta, me gusta, colecciones, audio original de música, temas, búsqueda, colecciones, obras, seguido, seguidores, etc.

erma0
⭐ 1,625 👤 erma0 User 🕐 Actualizado 2026-08-14 📅 Creado 2022-05-29
86
ArchiveTeam/grab-site

El rastreador web del archivero: salida WARC, panel de control para todos los rastreos, patrones de ignoración dinámicos

ArchiveTeam
⭐ 1,572 Python 👤 ArchiveTeam Organization 🕐 Actualizado 2025-05-23 📅 Creado 2015-02-05
87
srx-2000/spider_collection

Rastreadores de Python, inventario actual: Extracción de canciones de NetEase Cloud Music, Extracción de videos de Bilibili, Extracción de preguntas y respuestas de Zhihu, Extracción de fondos de pantalla, Extracción de videos de xvideos, Extracción de audiolibros, Rastreador de Weibo, Extracción de información de Anjuke + visualización de datos, Extractor de portadas de videos de Bilibili, Encapsulado de pool de proxies IP, Rastreador de usuarios de nivel millón de Zhihu + análisis de datos, Rastreador de usuarios de GitHub

srx-2000
⭐ 1,554 Python 👤 srx-2000 User 🕐 Actualizado 2024-04-23 📅 Creado 2020-02-04
88
0x676e67/wreq-python

Un cliente HTTP de Python ergonómico y consciente de la privacidad

0x676e67
⭐ 1,526 Python 👤 0x676e67 User 🕐 Actualizado 2026-11-15 📅 Creado 2025-02-10
89
rebrowser/rebrowser-patches

Colección de parches para puppeteer y playwright para evitar la detección de automatización y fugas. Ayuda a evitar las páginas CAPTCHA de Cloudflare y DataDome. Fácil de parchear/desparchear, se puede habilitar/deshabilitar bajo demanda.

rebrowser
⭐ 1,468 JavaScript 👤 rebrowser Organization 🕐 Actualizado 2026-11-02 📅 Creado 2024-08-06
90
dadoonet/fscrawler

Elasticsearch Rastreador de Sistema de Archivos (Rastreador FS)

dadoonet
⭐ 1,459 Java 👤 dadoonet User 🕐 Actualizado 2026-11-19 📅 Creado 2012-06-08
91
xisuo67/XHS-Spider

Herramienta de recopilación de datos de Xiaohongshu, herramienta de descarga masiva de imágenes de sitios web y recursos de video, herramienta de recopilación de datos de apariencia súper atractiva (descarga masiva, extracción de video, imágenes) Telegram:https://t.me/+ZtLSwuIKTo44MDY1

xisuo67
⭐ 1,456 👤 xisuo67 User 🕐 Actualizado 2025-12-16 📅 Creado 2023-04-25
92
openwpm/OpenWPM

Un marco de medición de la privacidad en la web

openwpm
⭐ 1,429 Python 👤 openwpm Organization 🕐 Actualizado 2026-10-13 📅 Creado 2014-06-10
93
darbra/sperm

Resumen de excelentes artículos de ingeniería inversa, vale la pena echarle un vistazo

darbra
⭐ 1,427 👤 darbra User 🕐 Actualizado 2026-04-13 📅 Creado 2022-03-02
94
kgspider/crawler

Compartición de código de web scraping del Hermano K, ingeniería inversa de JS, web scraping avanzado. Sigue la cuenta pública de WeChat: Web scraping del Hermano K

kgspider
⭐ 1,371 JavaScript 👤 kgspider User 🕐 Actualizado 2025-05-12 📅 Creado 2021-08-24
95
lorey/mlscraper

🤖 Extrae datos de sitios web HTML automáticamente con solo proporcionar ejemplos

lorey
⭐ 1,370 Python 👤 lorey User 🕐 Actualizado 2024-03-17 📅 Creado 2020-07-30
96
felipecsl/wombat

Crawler/scraper web ligero de Ruby con un DSL elegante que extrae datos estructurados de las páginas.

felipecsl
⭐ 1,360 Ruby 👤 felipecsl User 🕐 Actualizado 2026-10-27 📅 Creado 2011-11-14
97
0xInfection/XSRFProbe

El Prime Cross Site Request Forgery (CSRF) Kit de Auditoría y Explotación.

0xInfection
⭐ 1,310 Python 👤 0xInfection User 🕐 Actualizado 2026-07-12 📅 Creado 2018-08-21
98
fastcrw/crw

Alternativa rápida y ligera a Firecrawl/Tavily escrita en Rust. API de web scraping, rastreo y búsqueda con servidor MCP para agentes de IA. API compatible con Firecrawl (/scrape, /crawl, /search). 2.3 veces más rápida que Tavily y 1.5 veces más rápida que Firecrawl en pruebas de 1K URL. 6 MB de RAM, binario único. Autohospedaje o uso en la nube gestionada.

fastcrw
⭐ 1,284 Rust 👤 fastcrw Organization 🕐 Actualizado 2026-11-21 📅 Creado 2026-03-02
99
dwisiswant0/go-dork

El escáner Dork más rápido escrito en Go.

dwisiswant0
⭐ 1,266 Go 👤 dwisiswant0 User 🕐 Actualizado 2024-02-04 📅 Creado 2020-07-13
100
kiddyuchina/Beanbun

Beanbun es un framework de rastreo web multiproceso escrito en PHP, con buena apertura y alta escalabilidad, basado en Workerman.

kiddyuchina
⭐ 1,258 PHP 👤 kiddyuchina User 🕐 Actualizado 2026-05-26 📅 Creado 2017-04-13