Git Stars Git Stars

#scrapy Repositorios

Descubre 38 repositorios activos de código abierto de GitHub etiquetados con #scrapy, que acumulan 84,191 estrellas en total (una media de 2,215 estrellas por proyecto). El líder de este tema es crawlab-team/crawlab, con 12,301 estrellas.

38
Total de Repositorios
84,191
Total de estrellas
2,215
Promedio de Estrellas/Repo

38 repositorios en total

1
crawlab-team/crawlab

Plataforma de administración distribuida para rastreadores web para la gestión de arañas independientemente de los idiomas y marcos de trabajo. 分布式爬虫管理平台,支持任何语言和框架

crawlab-team
⭐ 12,301 Go 👤 crawlab-team Organization 🕐 Actualizado 2026-02-10 📅 Creado 2019-02-10
2
chyroc/WechatSogou

Interfaz de crawler de cuentas públicas de WeChat basada en la búsqueda de WeChat de Sogou

chyroc
⭐ 6,411 Python 👤 chyroc User 🕐 Actualizado 2026-10-23 📅 Creado 2016-05-09
3
rmax/scrapy-redis

Componentes basados en Redis para Scrapy.

rmax
⭐ 5,648 Python 👤 rmax User 🕐 Actualizado 2026-11-21 📅 Creado 2011-08-29
4
DropsDevopsOrg/ECommerceCrawlers

Práctica 🐍 de múltiples sitios web, rastreadores de datos de comercio electrónico 🕷. Incluye 🕸: Productos de Taobao, cuentas públicas de WeChat, Dianping, Qichacha, sitios web de empleo, Xianyu, tareas de Ali, Cnblogs, Weibo, Baidu Tieba, películas de Douban, Baotu.com, Quan jing wang, música de Douban, oficina de supervisión de medicamentos de alguna provincia, noticias de Sohu, recolección de texto de aprendizaje automático, recolección de activos fofa, Autohome, Oficina Nacional de Estadísticas, número de inclusión de palabras clave de Baidu, directorio general de arañas, Toutiao, reseñas de películas de Douban, Ctrip, tienda de aplicaciones de Xiaomi, Anjuke, hospedaje de Tujia ❤️❤️❤️. Proyecto de demostración de rastreador de WeChat:

DropsDevopsOrg
⭐ 5,355 Python 👤 DropsDevopsOrg Organization 🕐 Actualizado 2024-05-22 📅 Creado 2019-03-29
5
nghuyong/WeiboSpider

Herramienta de recolección de Sina Weibo mantenida continuamente🚀🚀🚀

nghuyong
⭐ 4,125 Python 👤 nghuyong User 🕐 Actualizado 2026-06-30 📅 Creado 2017-10-29
6
Boris-code/feapder

🚀🚀🚀feapder es un framework de rastreo fácil de usar y potente | feapder es un framework de rastreo de Python fácil de usar y potente. Incorpora cuatro tipos de rastreadores: AirSpider, Spider, TaskSpider y BatchSpider para satisfacer las necesidades de diferentes escenarios. Admite funciones como la reanudación de puntos de interrupción, monitoreo y alertas, renderizado de navegador y deduplicación de grandes cantidades de datos. Además, el potente sistema de gestión de rastreadores feaplat proporciona una implementación y programación convenientes.

Boris-code
⭐ 3,732 Python 👤 Boris-code User 🕐 Actualizado 2026-08-21 📅 Creado 2021-02-08
7
Gerapy/Gerapy

Marco de Gestión de Crawlers Distribuido Basado en Scrapy, Scrapyd, Django y Vue.js

Gerapy
⭐ 3,518 Python 👤 Gerapy Organization 🕐 Actualizado 2026-07-04 📅 Creado 2017-06-30
8
my8100/scrapydweb

Aplicación web para la gestión de clústeres Scrapyd, análisis y visualización de logs de Scrapy, empaquetado automático, tareas programadas, monitoreo y alertas, y UI móvil. Docs documentación :point_right:

my8100
⭐ 3,403 Python 👤 my8100 User 🕐 Actualizado 2025-02-19 📅 Creado 2018-09-30
9
scrapy-plugins/scrapy-splash

Scrapy+Splash para la integración de JavaScript

scrapy-plugins
⭐ 3,230 Python 👤 scrapy-plugins Organization 🕐 Actualizado 2025-02-11 📅 Creado 2013-05-13
10
scrapy/scrapyd

Un daemon de servicio para ejecutar arañas de Scrapy

scrapy
⭐ 3,100 Python 👤 scrapy Organization 🕐 Actualizado 2026-10-23 📅 Creado 2013-02-01
11
RayXBuilds/Movie_Recommend

Proyecto histórico de aprendizaje: recomendaciones de películas con Spark, web scraping, aplicación web y backend. El desarrollo continuo de la nueva versión está en cinematch-recommender.

RayXBuilds
⭐ 3,007 Java 👤 RayXBuilds User 🕐 Actualizado 2026-10-21 📅 Creado 2018-04-18
12
dataabc/weibo-search

Obtener información de los resultados de búsqueda de Weibo, la búsqueda puede ser una búsqueda por palabra clave de Weibo o una búsqueda por tema de Weibo

dataabc
⭐ 2,340 Python 👤 dataabc User 🕐 Actualizado 2026-06-05 📅 Creado 2020-03-25
13
QianyanTech/Image-Downloader

Descargar imágenes de Google, Bing, Baidu. Descarga de imágenes de Google, Baidu, Bing.

QianyanTech
⭐ 2,331 Python 👤 QianyanTech Organization 🕐 Actualizado 2024-07-07 📅 Creado 2016-07-17
14
ictar/python-doc

Traducir documentos de Python al chino para una referencia conveniente En pocas palabras, aquí es donde se guardan esos queridos documentos de Python, y haremos todo lo posible para traducirlos al chino ~~

ictar
⭐ 1,942 👤 ictar User 🕐 Actualizado 2024-05-17 📅 Creado 2015-12-18
15
DanMcInerney/xsscrapy

Araña XSS - 66/66 wavsep XSS detectado

DanMcInerney
⭐ 1,731 Python 👤 DanMcInerney User 🕐 Actualizado 2024-06-13 📅 Creado 2014-06-23
16
TheWebScrapingClub/webscraping-from-0-to-hero

El repositorio del proyecto abierto de web scraping tiene como objetivo compartir conocimientos y experiencias sobre web scraping con Python.

TheWebScrapingClub
⭐ 1,695 👤 TheWebScrapingClub Organization 🕐 Actualizado 2024-05-27 📅 Creado 2022-05-26
17
eliasdabbas/advertools

advertools - herramientas de productividad y análisis para marketing online

eliasdabbas
⭐ 1,508 Python 👤 eliasdabbas User 🕐 Actualizado 2026-06-30 📅 Creado 2017-05-14
18
scrapy-plugins/scrapy-playwright

Integración de Playwright para Scrapy

scrapy-plugins
⭐ 1,469 Python 👤 scrapy-plugins Organization 🕐 Actualizado 2026-11-02 📅 Creado 2020-11-10
19
tb0hdan/domains

El dataset de dominios de Internet más grande y único del mundo

tb0hdan
⭐ 1,181 Shell 👤 tb0hdan User 🕐 Actualizado 2026-11-11 📅 Creado 2020-01-12
20
xingag/spider_python

rastreador Python

xingag
⭐ 1,165 Python 👤 xingag User 🕐 Actualizado 2026-08-07 📅 Creado 2018-09-12
21
juancarlospaco/faster-than-requests

Solicitudes más rápidas en Python 3

juancarlospaco
⭐ 1,131 Nim 👤 juancarlospaco User 🕐 Actualizado 2026-11-19 📅 Creado 2018-11-13
22
vifreefly/kimuraframework

Escribe web scrapers en Ruby usando un DSL limpio y asistido por IA. Kimurai emplea IA para determinar dónde se encuentran los datos, luego almacena en caché los selectores y realiza scraping con Ruby puro. Obtén la inteligencia de un LLM sin la latencia por solicitud ni los costos de tokens.

vifreefly
⭐ 1,102 Ruby 👤 vifreefly User 🕐 Actualizado 2026-01-27 📅 Creado 2018-08-23
23
moyada/stealer

Douyin, Kuaishou, Huoshan, Pipixia, programa para eliminar marcas de agua de video

moyada
⭐ 1,094 Python 👤 moyada User 🕐 Actualizado 2024-05-21 📅 Creado 2020-04-07
24
clemfromspace/scrapy-selenium

Middleware de Scrapy para manejar páginas de JavaScript usando Selenium

clemfromspace
⭐ 950 Python 👤 clemfromspace User 🕐 Actualizado 2026-04-13 📅 Creado 2018-02-11
25
TikHub/TikHub-API-Python-SDK

API (interfaz) de solución de Captcha (solucionador de códigos de verificación) de alto rendimiento asíncrono para Douyin (抖音), TikTok, Xiaohongshu (小红书), Kuaishou (快手), Weibo (微博), Instagram, YouTube (油管), Twitter (X) con correo temporal (Temp Mail).

TikHub
⭐ 943 Python 👤 TikHub Organization 🕐 Actualizado 2026-10-03 📅 Creado 2022-12-17
26
hellock/icrawler

Un framework de rastreador multi-hilo con muchos rastreadores de imágenes incorporados proporcionados.

hellock
⭐ 936 Python 👤 hellock User 🕐 Actualizado 2025-12-10 📅 Creado 2016-03-19
27
superboyyy/xianyu_spider

Rastreador de Xianyu, desarrollado sobre el cliente web de Xianyu. Proporciona una API de búsqueda de productos creada con FastAPI, compatible con solicitudes asíncronas concurrentes y con la deduplicación y el almacenamiento automatizados de datos. Ahora también admite el inicio de sesión.

superboyyy
⭐ 922 Python 👤 superboyyy User 🕐 Actualizado 2026-09-18 📅 Creado 2025-06-04
28
scrapinghub/scrapyrt

API HTTP para arañas de Scrapy

scrapinghub
⭐ 884 Python 👤 scrapinghub Organization 🕐 Actualizado 2026-10-13 📅 Creado 2015-01-06
29
alltheplaces/alltheplaces

Un conjunto de spiders y scrapers para extraer información de ubicación de lugares que publican su ubicación en internet.

alltheplaces
⭐ 851 Python 👤 alltheplaces Organization 🕐 Actualizado 2026-11-21 📅 Creado 2016-06-15
30
MorvanZhou/easy-scraping-tutorial

Código de tutorial simple pero útil para web scraping en Python.

MorvanZhou
⭐ 814 Jupyter Notebook 👤 MorvanZhou User 🕐 Actualizado 2024-04-07 📅 Creado 2017-12-29
31
unnohwn/telegram-scraper

Un potente script de Python que te permite extraer mensajes y medios de canales de Telegram utilizando la biblioteca Telethon. Las características incluyen raspado continuo en tiempo real, descarga de medios y capacidades de exportación de datos.

unnohwn
⭐ 797 Python 👤 unnohwn User 🕐 Actualizado 2026-04-11 📅 Creado 2024-11-04
32
scrapy/scrapyd-client

Cliente de línea de comandos para el servidor Scrapyd

scrapy
⭐ 773 Python 👤 scrapy Organization 🕐 Actualizado 2026-02-27 📅 Creado 2015-03-27
33
TeamHG-Memex/scrapy-rotating-proxies

usar múltiples proxies con Scrapy

TeamHG-Memex
⭐ 772 Python 👤 TeamHG-Memex Organization 🕐 Actualizado 2026-04-08 📅 Creado 2017-02-01
34
casual-silva/NewsCrawl

Proyecto empresarial de código abierto de rastreo de noticias de opinión pública: admite la ejecución con un clic de cualquier número de rastreadores, tareas programadas de rastreadores, eliminación por lotes de rastreadores; implementación con un clic de rastreadores; visualización de monitoreo de rastreadores; configuración de estrategia de asignación de rastreadores en clúster; 👉 La documentación de implementación Docker lista ya ha resuelto los problemas por ti.

casual-silva
⭐ 688 Python 👤 casual-silva User 🕐 Actualizado 2026-05-23 📅 Creado 2022-07-08
35
lzjqsdd/NewsSpider

Extraer noticias de Toutiao, NetEase, Tencent, etc., y construir un motor de búsqueda simple

lzjqsdd
⭐ 638 Python 👤 lzjqsdd User 🕐 Actualizado 2024-05-14 📅 Creado 2016-04-19
36
mouday/spider-admin-pro

spider-admin-pro Una herramienta de gestión visual para la visualización de proyectos de rastreadores Scrapy+Scrapyd y la programación temporizada de tareas de rastreadores, la versión mejorada de SpiderAdmin

mouday
⭐ 614 Python 👤 mouday User 🕐 Actualizado 2026-06-15 📅 Creado 2021-01-25
37
spekulatius/PHPScraper

Una utilidad web universal para PHP.

spekulatius
⭐ 588 PHP 👤 spekulatius User 🕐 Actualizado 2026-09-08 📅 Creado 2020-04-21
38
AlexMathew/scrapple

Un marco para la creación de extractores de contenido web semiautomáticos

AlexMathew
⭐ 506 Python 👤 AlexMathew User 🕐 Actualizado 2026-01-16 📅 Creado 2014-12-13

Preguntas frecuentes

1

¿Cuál es el repositorio de #scrapy más popular en GitHub?

El proyecto de código abierto de #scrapy mejor posicionado en GitHub es crawlab-team/crawlab, con 12,301 estrellas. Plataforma de administración distribuida para rastreadores web para la gestión de arañas independientemente de los idiomas y marcos de trabajo. 分布式爬虫管理平台,支持任何语言和框架

2

¿Qué lenguajes de programación se utilizan más en los repositorios de #scrapy?

Entre los proyectos de #scrapy mejor posicionados en GitHub, los lenguajes de programación más comunes son Python, Go, Java, Shell.

3

¿Cómo se calcula la clasificación de los repositorios de #scrapy?

Seguimos 38 repositorios activos de código abierto etiquetados con #scrapy (500+ estrellas), que suman un total de 84,191 estrellas, con una media de 2,215 estrellas por repositorio. Las clasificaciones se actualizan diariamente a partir de la API de GitHub.