#web-scraping Repositorios
382 repositorios en total
Amazon Nova Act es un servicio de AWS para construir e implementar agentes de IA altamente confiables que automatizan flujos de trabajo basados en UI a escala.
Una versión compatible con Python 3 de goose http://goose3.readthedocs.io/en/latest/index.html
Obtener fuentes de transmisión en vivo de múltiples plataformas de transmisión en vivo
Accede a tus datos de seguimiento de comidas almacenados en MyFitnessPal de forma programática
Invisible Playwright MCP: servidor Playwright MCP indetectable por los sistemas antibots y los CAPTCHA: un agente de IA navega por la web con Firefox sigiloso y antidetección, Python, automatización de navegador indetectable, extracción de datos y uso del ordenador.
⭐️ Un descargador lindo y terco de audio de álbumes de Himalaya sin limitaciones O(∩_∩)O
Una herramienta para el cambio de pool de proxies buscando proxies SOCKS5 abiertos con Fofa
Incendio en Hong Kong (Tai Po, 26/11): Un gran incendio arrasó Wang Fuk Court
tailwindui-crawler descarga los archivos HTML de los componentes localmente
Una biblioteca versátil de Ruby para rastreo web que puede rastrear un sitio, múltiples dominios, ciertos enlaces o infinitamente. Spidr está diseñado para ser rápido y fácil de usar.
Software de grabación automática de streaming en vivo multiplataforma basado en Electron, soporta Douyin/Kuaishou en formato de múltiples enlaces
Un controlador de navegador web programable e integrable compatible con la especificación Selenium WebDriver: sin cabeza, basado en WebKit, Java puro
Motor Chromium sigiloso que evita que los scrapers y los agentes de navegador sean bloqueados con un solo cambio de línea de código.
Versión de NodeJS no detectada de la biblioteca de pruebas y automatización Playwright.
Guía para elegir navegadores de huellas digitales (navegadores anti-asociación / anti-detección / Antidetect Browser) e IP de proxy residenciales, además de una recopilación de recursos de código abierto: precios de los planes de 27 navegadores de huellas digitales destacados y 28 proveedores de IP proxy, con información sobre personalización de huellas digitales de Chromium, Camoufox, Patchright, automatización anti-detección y herramientas de detección de huellas digitales.
Integra las fuentes existentes de Xiangse Guguan en la web, el rastreador actualiza automáticamente las fuentes de libros semanalmente
Selenium que los sistemas anti-bots no pueden ver, así que no hay CAPTCHAs: la misma API, Firefox headless sigiloso y anti-detección, huella digital indetectable, evasión de la detección de bots, scraping web y automatización del navegador con Python.
La lista de tendencias de Weibo registra las búsquedas populares en Weibo a partir del 24 de noviembre de 2020. Los datos se recopilan cada hora y se archivan diariamente.
Utilice Cloudflare para crear proxies de traspaso HTTP para la rotación única de IP, similar a fireprox
Apila bloques visualmente para crear flujos de trabajo complejos en el navegador y ejecútalos mediante la API
Extraiga metadatos de películas de XBMC y Kodi y cambie automáticamente el nombre de los archivos para videos para adultos japoneses (JAV), DVD para adultos estadounidenses y contenido web para adultos estadounidenses.
Panel Qinglong, únete, Banu Hot Pot, FAW-Volkswagen, Haidilao, Watsons, Bawang Tea Master, Huazhu Club, Dongcheng Club, Wanda Hotels, Yihetang Check-in automático. Monitoreo de inventario y cambios de precios en la tienda DJI
Registra la lista de tendencias de Douyin, la lista de estrellas, la lista de transmisiones en vivo, la lista de música y la lista de marcas, se actualiza cada hora y se archiva por día.
Proxies residenciales, de centros de datos, ISP y móviles con más de 90 millones de IP en más de 200 países, además de API de scraping y SERP. Ejemplos de código en Python, Node.js, PHP, Go, Java, C#, Ruby y curl.
Una herramienta de análisis y procesamiento de flujos de video en red para CCTV.com
LittleCrawler (小爬虫), soporta la extracción de información pública en las plataformas Xiaohongshu (xhs), Zhihu y XianYu.
Resultados de búsqueda de Google a través de SERP API pip Python Package
CLI rápido y sin estado para buscar y extraer contenido de la web. Diseñado para agentes de IA.
Convierte cualquier aplicación web en una API. La extensión de Chrome captura el tráfico del navegador, genera automáticamente esquemas y permite que la IA reproduzca APIs directamente. No se necesita API oficial.