#web-scraping Repositórios
382 repositórios no total
Amazon Nova Act é um serviço da AWS para construir e implantar agentes de IA altamente confiáveis que automatizam fluxos de trabalho baseados em UI em escala.
Uma versão compatível com Python 3 do goose http://goose3.readthedocs.io/en/latest/index.html
Uma ferramenta CLI e uma API para buscar dados do Twitter gratuitamente!
Acesse programaticamente os seus dados de acompanhamento de refeições armazenados no MyFitnessPal
Invisible Playwright MCP: servidor Playwright MCP indetectável por sistemas antibot e CAPTCHAs: um agente de IA navega na web usando Firefox furtivo com proteção contra detecção, Python, automação de navegador indetectável, raspagem de dados e uso do computador.
⭐️ Um downloader de áudio ilimitado e fofo para álbuns do Himalaia O(∩_∩)O
Ferramenta para alternar o pool de proxy usando proxies abertos socks5 pesquisados com fofa
Incêndio em Hong Kong (Tai Po, 26/11): Um grande incêndio varreu o Wang Fuk Court
Uma biblioteca versátil de web spidering em Ruby que pode rastrear um site, múltiplos domínios, links específicos ou infinitamente. Spidr foi projetada para ser rápida e fácil de usar.
Software de gravação automática de transmissões ao vivo multiplataforma baseado em Electron, suportando Douyin/Kuaishou em formato de múltiplos links
Um driver de navegador web programável e embarcável, compatível com a especificação Selenium WebDriver -- headless, baseado em WebKit, Java puro
Motor Chromium furtivo que impede que scrapers e agentes de navegador sejam bloqueados com uma única alteração em uma linha de código.
Versão NodeJS não detectada da biblioteca de testes e automação Playwright.
Guia para escolher navegadores de impressão digital (navegadores antiassociação / antidetecção / Antidetect Browser) e IPs de proxy residenciais, com uma compilação de recursos de código aberto: planos e preços de 27 navegadores de impressão digital líderes e 28 provedores de IP proxy, incluindo personalização de impressões digitais do Chromium, Camoufox, Patchright, automação antidetecção e ferramentas de detecção de impressões digitais.
Integra as fontes existentes de 'Xiang Se Gui Ge' (Salas de Donzelas Perfumadas) na internet, com o web crawler atualizando as fontes automaticamente toda semana
Selenium invisível para sistemas anti-bot, sem CAPTCHAs: a mesma API, Firefox headless furtivo com proteção contra detecção, impressão digital indetectável, evasão da detecção de bots, raspagem da web e automação de navegador com Python.
A Lista de Pesquisas Mais Quentes do Weibo registra as buscas populares do Weibo a partir de 24 de novembro de 2020. Os dados são capturados a cada hora e arquivados diariamente.
Use o Cloudflare para criar proxies de passagem HTTP para rotação de IP exclusiva, semelhante ao fireprox
Empilhe blocos visualmente para criar fluxos de trabalho complexos no navegador e execute-os por meio da API
Extrair metadados de filmes do XBMC e Kodi e renomear arquivos automaticamente para Vídeos Adultos Japoneses (JAV), DVDs Adultos Americanos e Conteúdo Adulto Americano da Web
Painel Qinglong, participar, Banu Hot Pot, FAW-Volkswagen, Haidilao, Watsons, Bawang Tea Master, Huazhu Club, Dongcheng Club, Wanda Hotels, Check-in automático Yihetang. Monitoramento de estoque e mudanças de preço na loja DJI
Acompanha as listas de tendências, celebridades, transmissões ao vivo, músicas e marcas do Douyin, atualizadas a cada hora e arquivadas diariamente.
Proxies residenciais, de datacenter, ISP e móveis com mais de 90 milhões de IPs em mais de 200 países — além de APIs de scraping e SERP. Exemplos de código em Python, Node.js, PHP, Go, Java, C#, Ruby e curl.
Uma ferramenta de análise e processamento de fluxo de vídeo de rede para CCTV.com
LittleCrawler (小爬虫), suporta a coleta de informações públicas nas plataformas Xiaohongshu (xhs), Zhihu e XianYu.
Resultados de Pesquisa do Google via Pacote Python SERP API
CLI rápida e sem estado para pesquisa e extração de conteúdo da web. Desenvolvida para agentes de IA.
Transforme qualquer aplicativo web em uma API. Extensão do Chrome captura o tráfego do navegador, gera esquemas automaticamente e permite que a IA reproduza APIs diretamente. Nenhuma API oficial necessária.