#web-scraping Repositorios
382 repositorios en total
Playwright Model Context Protocol Server - Herramienta para automatizar navegadores y API en Claude Desktop, Cline, Cursor IDE y más 🔌
La web de referencia para su agente de codificación de IA: búsqueda local, obtención, rastreo e investigación a través de MCP. Sin claves API, sin nube, $0/consulta. Beta pública.
Versión no detectada de la biblioteca de pruebas y automatización Playwright.
Extrae el sistema de diseño completo de cualquier sitio web con un solo comando. Tokens DTCG, semántico+primitivo+compuesto, servidor MCP para Claude Code/Cursor/Windsurf, emisores multiplataforma (iOS SwiftUI, Android Compose, Flutter, WordPress), Tailwind v4, variables de Figma, shadcn/ui, auditoría de salud CSS, remediación WCAG, extensión de Chrome. MIT, Playwright, Node 20+.
Sucesor de Undetected-Chromedriver. Proporciona un framework ultrarrápido para la automatización web, el web scraping, bots y cualquier otra idea creativa que normalmente se ve obstaculizada por molestos sistemas anti-bot como Captcha / CloudFlare / Imperva / hCaptcha.
Introducción a la extracción de datos, Nivel intermedio de extracción de datos, Extracción de datos avanzada
El cliente de solicitud HTTP simplificado 'request' con soporte de Promise. Impulsado por Bluebird.
Ejemplos de código del libro Web Scraping with Python http://shop.oreilly.com/product/0636920034391.do
Un extractor agéntico para plataformas de mensajería. Noria recibe mensajes y URL por chat, recopila datos de la web para evaluar el contenido según matrices de puntuación personalizadas (por ejemplo, empleos y becas) y envía un resumen estructurado con una puntuación de compatibilidad calculada directamente al número de mensajería asignado.
Copiar listas de reproducción y música favorita de Spotify a YTMusic
buscar y descargar música De NetEase Cloud Music, QQ Music, KuGou Music, Baidu Music, Xiami Music, MiGu Music, etc. buscar y descargar canciones
(no oficial) Googletrans: API gratuita e ilimitada de Google Translate para Python. Traduce totalmente gratis.
El hogar definitivo para aplicaciones de código abierto y depuradas. OrionStore te ofrece acceso instantáneo a YouTube Morphe, YT Music Morphe y herramientas esenciales de código abierto, sin elementos innecesarios. Sin servidores ni seguimiento: solo una puerta de entrada moderna y elegante a tus aplicaciones favoritas.
Haz ingeniería inversa de cualquier sitio web para convertirlo en un cliente API tipado. Compatible con Claude Code, Codex, Cursor y OpenCode.
Snoop – una herramienta OSINT (Inteligencia de Código Abierto) basada en datos abiertos
Mantente al tanto de los temas de moda en redes sociales y en la web con IA
Superstar Learning Cloud / Super Star Er Ya / Pan Ya Super Star Completamiento automático no tripulado de puntos de tarea
Tome una lista de dominios, rastree URL y escanee en busca de puntos finales, secretos, claves de API, extensiones de archivo, tokens y más.
Monitoreo · recopilación · republicación de contenido en múltiples plataformas. Un solo panel web para gestionar Douyin / Xiaohongshu / Kuaishou / Canales de WeChat / TikTok / Bilibili / Instagram / Xiaohongshu internacional (rednote)
API de web scraping de código abierto. Convierte cualquier sitio web en Markdown limpio o JSON estructurado. Navegador anti-detección, selección automática de proxy, autohospedado. Un solo comando: make up
Reingeniería inversa de TikTok, rastreador de TikTok, todas las API de TikTok, mensajes privados, monitoreo de salas de transmisión en vivo
API Scraper de Amazon de prueba gratuita para extraer datos de búsquedas, productos, listas de ofertas, reseñas, preguntas y respuestas, los más vendidos y vendedores.
Recopilación de datos estructurados desde cualquier sitio web utilizando un scraper, un rastreador y automatización de navegador impulsados por IA. Web scraping y rastreo con indicaciones de lenguaje natural. Equipe a sus agentes LLM con datos frescos. SDK de Python de AI Studio para la recopilación inteligente de datos web.
Automatización sigilosa del navegador para agentes de IA mediante MCP y el protocolo Chrome DevTools: navegación, hooks de red, extracción del DOM y clonación de interfaces de usuario con precisión de píxel.
PHP Curl Class hace que sea fácil enviar solicitudes HTTP e integrar con APIs web.
Navegador antifingerprinting gratuito, navegador de huellas dactilares, navegador de privacidad, navegador anti-reconocimiento, navegador anti-identificación, navegador anti-asociación, navegador gratuito específico para airdrops de Web3 con huellas dactilares https://virtualbrowser.cc/?src=github
Un etiquetador de medios personal en estilo booru que puede importar archivos y etiquetas desde tu disco duro y sitios web populares. El contenido puede compartirse con otros usuarios a través de servidores gestionados por usuarios.
El proceso de extracción de datos de productos de Amazon utilizando Python, incluyendo títulos, calificaciones, precios, imágenes y descripciones.
📲 Un agente para obtener, curar y programar publicaciones en redes sociales con intervención humana.
¡Un programa de Python que convierte un LLM, ejecutándose en Ollama, en un investigador automatizado, que con una sola consulta determinará las áreas de enfoque a investigar, realizará búsquedas en la web y extraerá contenido de varios sitios web relevantes y hará investigación por usted ¡todo por sí solo! ¡Y más, sin limitarse a, pero incluyendo guardar los hallazgos para usted!
Biblioteca de Python y CLI para el scraping de X/Twitter con rotación de múltiples cuentas y manejo integrado de límites de velocidad.
Una API de alto nivel para controlar Chrome o Chromium sin cabeza a través del Protocolo DevTools. Es el equivalente en Rust de Puppeteer, una biblioteca de Node mantenida por el equipo de Chrome DevTools.
Aprenda paso a paso cómo extraer datos de Google Trends y comparar resultados usando Python y la API SERP de Oxylabs. Extraiga palabras clave, su popularidad, desglose por región, consultas relacionadas y mucho más.
Huya, Douyu, Douyin, BiliBili, TikTok, Twitch🔥Popular🔥Robot IA inteligente para edición y publicación de videos en vivo, Automatización🤖, Totalmente inteligente⚙(generación automática de clips, títulos, miniaturas, descripciones), Visualización👓, Monitorización de plataformas populares🌡, Plugins ricos expandibles a voluntad🕹, Despliegue rápido⚡, Publicación automática de cuentas de video🌟, Soporte DIY🎮
Un potente servidor Model Context Protocol (MCP) que proporciona una solución todo en uno para el acceso a la web pública.