Git Stars Git Stars

#web-scraping Repositórios

381
Total de Repositórios
2.1M
Total de estrelas
5,636
Média de Estrelas/Repositório

382 repositórios no total

201
germondai/trawl

Mecanismo de scraping auto-hospedado — ignora qualquer desafio JS e captcha: Cloudflare, Turnstile, reCAPTCHA, hCaptcha, GeeTest. Alternativa ao FlareSolverr e Byparr e substituição direta para sua pilha *arr.

germondai
⭐ 1,209 TypeScript 👤 germondai User 🕐 Atualizado 2026-11-16 📅 Criado 2026-06-26
202
intoli/user-agents

Uma biblioteca JavaScript para gerar user agents aleatórios com dados atualizados diariamente.

intoli
⭐ 1,194 TypeScript 👤 intoli Organization 🕐 Atualizado 2026-11-21 📅 Criado 2018-08-06
203
Evolution0/bandcamp-dl

Script Python simples para baixar álbuns do Bandcamp

Evolution0
⭐ 1,189 Python 👤 Evolution0 User 🕐 Atualizado 2026-11-18 📅 Criado 2013-04-29
204
goodreasonai/ScrapeServ

Uma API auto-hospedada que recebe uma URL e retorna um arquivo com capturas de tela do navegador.

goodreasonai
⭐ 1,184 Python 👤 goodreasonai Organization 🕐 Atualizado 2025-03-09 📅 Criado 2025-02-05
205
eshaham/israeli-bank-scrapers

Fornecer raspadores para todos os principais bancos e empresas de cartão de crédito israelenses

eshaham
⭐ 1,181 TypeScript 👤 eshaham User 🕐 Atualizado 2026-11-20 📅 Criado 2017-07-29
206
dchrastil/ScrapedIn

Uma ferramenta para raspar o LinkedIn sem restrições de API para reconhecimento de dados

dchrastil
⭐ 1,168 Python 👤 dchrastil User 🕐 Atualizado 2024-04-11 📅 Criado 2018-03-29
207
ccd0/4chan-x

Adiciona vários recursos a quadros de imagens anônimos.

ccd0
⭐ 1,163 CoffeeScript 👤 ccd0 User 🕐 Atualizado 2026-08-27 📅 Criado 2014-04-01
208
yize8888/maotai

iMoutai, script de reserva dos Irmãos Calabash

yize8888
⭐ 1,135 JavaScript 👤 yize8888 User 🕐 Atualizado 2025-03-08 📅 Criado 2023-06-20
209
fwonggh/Bthub

Página de Lançamento do Endereço Mais Recente do Bthub

fwonggh
⭐ 1,134 HTML 👤 fwonggh User 🕐 Atualizado 2026-11-21 📅 Criado 2020-01-11
210
scrapfly/scrapfly-scrapers

Scripts escaláveis de web scraping em Python para mais de 80 domínios populares

scrapfly
⭐ 1,133 Python 👤 scrapfly Organization 🕐 Atualizado 2026-11-21 📅 Criado 2023-05-22
211
juancarlospaco/faster-than-requests

Requisições mais rápidas no Python 3

juancarlospaco
⭐ 1,131 Nim 👤 juancarlospaco User 🕐 Atualizado 2026-11-19 📅 Criado 2018-11-13
212
cipher387/python-for-OSINT-21-days

Neste repositório você encontrará arquivos de código de exemplo para cada dia do curso "Python para OSINT. Um curso de 21 dias para iniciantes".

cipher387
⭐ 1,129 Python 👤 cipher387 User 🕐 Atualizado 2026-01-06 📅 Criado 2023-03-26
213
Cloxl/xhshow

Cálculo puro Xiaohongshu xs, engenharia reversa de cálculo puro para campos como Xiaohongshu x-s, x-s-common, xsc, e outros.

Cloxl
⭐ 1,124 Python 👤 Cloxl User 🕐 Atualizado 2026-06-11 📅 Criado 2024-09-11
215
xiaoguyu/wechatDownload

Ferramenta de download de artigos do WeChat Official Account

xiaoguyu
⭐ 1,107 TypeScript 👤 xiaoguyu User 🕐 Atualizado 2025-11-28 📅 Criado 2023-01-03
216
vifreefly/kimuraframework

Escreva web scrapers em Ruby usando um DSL limpo e assistido por IA. O Kimurai utiliza IA para descobrir onde os dados estão, em seguida armazena em cache os seletores e faz scraping com Ruby puro. Obtenha a inteligência de um LLM sem a latência por solicitação ou custos de tokens.

vifreefly
⭐ 1,102 Ruby 👤 vifreefly User 🕐 Atualizado 2026-01-27 📅 Criado 2018-08-23
217
requireCool/stealth.min.js

Gere automaticamente o mais novo stealth.min.js.

requireCool
⭐ 1,096 👤 requireCool User 🕐 Atualizado 2026-11-16 📅 Criado 2022-04-10
218
caolvchong-top/twitter_download

Twitter Imagens Vídeos Web Crawler; Download com um clique

caolvchong-top
⭐ 1,087 Python 👤 caolvchong-top User 🕐 Atualizado 2026-07-28 📅 Criado 2022-08-23
219
YaoZeyuan/stablog

Estabilizar tribo. Backup profissional exporta registros do Weibo, estável!

YaoZeyuan
⭐ 1,085 JavaScript 👤 YaoZeyuan User 🕐 Atualizado 2026-08-15 📅 Criado 2019-09-11
220
Anil-matcha/awesome-agent-apis

Mais de 660 modelos de mídia generativa hospedados pelo muapi, além de ferramentas de API de terceiros enviadas pela comunidade (SEO, enriquecimento, redes sociais, scraping) — um arquivo YAML por entrada, com navegação por funcionalidade.

Anil-matcha
⭐ 1,070 Python 👤 Anil-matcha User 🕐 Atualizado 2026-10-14 📅 Criado 2023-05-06
221
antibrow/antibrow

Navegador antidetecção em nível de kernel com a API Playwright que você já utiliza. SDKs para Python e Node, compatível com MCP e perfis locais ilimitados. Linux x64 + arm64, macOS Intel + Apple Silicon e Windows x64.

antibrow
⭐ 1,068 TypeScript 👤 antibrow User 🕐 Atualizado 2026-09-28 📅 Criado 2026-07-29
222
IcarusRyy/NewJob

Identifique a última vez que esta posição foi modificada em um relance, verde significa dentro de 2 semanas, laranja escuro significa dentro de 1,5 meses e vermelho significa mais de 1,5 meses.

IcarusRyy
⭐ 1,058 JavaScript 👤 IcarusRyy User 🕐 Atualizado 2024-06-10 📅 Criado 2024-05-03
223
stay-leave/weibo-public-opinion-analysis

Projeto de análise da opinião pública baseado em dados do Weibo, incluindo rastreador do Weibo, análise de tópicos LDA e análise de sentimento.

stay-leave
⭐ 1,058 Python 👤 stay-leave User 🕐 Atualizado 2026-10-24 📅 Criado 2021-08-01
⭐ 1,054 HTML 👤 lm-rebooter User 🕐 Atualizado 2026-05-06 📅 Criado 2023-05-31
225
mandatoryprogrammer/thermoptic

Um proxy furtivo HTTP de próxima geração que mascara perfeitamente as solicitações como se fossem do navegador Chrome em todas as camadas da pilha.

mandatoryprogrammer
⭐ 1,053 JavaScript 👤 mandatoryprogrammer User 🕐 Atualizado 2026-10-25 📅 Criado 2025-09-02
⭐ 1,041 JavaScript 👤 badlogic User 🕐 Atualizado 2026-02-17 📅 Criado 2023-05-08
227
FR13ND8/BruteFb

HACK FACEBOOK COM MÉTODO BRUTEFORCE NO TERMUX

FR13ND8
⭐ 1,026 Python 👤 FR13ND8 User 🕐 Atualizado 2024-07-17 📅 Criado 2019-01-10
228
janreges/siteone-crawler

SiteOne Crawler é um rastreador e analisador de websites multiplataforma para otimização de SEO, segurança, acessibilidade e desempenho — ideal para desenvolvedores, DevOps, engenheiros de QA e consultores. Suporta Windows, macOS e Linux (x64 e arm64).

janreges
⭐ 1,019 Rust 👤 janreges User 🕐 Atualizado 2026-09-27 📅 Criado 2023-10-04
229
utkarshkukreti/select.rs

Uma biblioteca Rust para extrair dados úteis de documentos HTML, adequada para web scraping.

utkarshkukreti
⭐ 1,018 Rust 👤 utkarshkukreti User 🕐 Atualizado 2025-03-19 📅 Criado 2015-07-15
230
thepycoach/automation

Automação com Python (Excel, scripts, etc)

thepycoach
⭐ 1,010 Jupyter Notebook 👤 thepycoach User 🕐 Atualizado 2024-05-19 📅 Criado 2021-05-02
231
fferrin/free-medium

Uma extensão para ler publicações do Medium gratuitamente

fferrin
⭐ 1,008 JavaScript 👤 fferrin User 🕐 Atualizado 2025-11-02 📅 Criado 2024-02-13
232
WittmannF/sort-google-scholar

Classificação dos resultados de pesquisa do Google Scholar com base no número de citações

WittmannF
⭐ 999 Python 👤 WittmannF User 🕐 Atualizado 2026-10-30 📅 Criado 2016-04-30
233
maldevel/EmailHarvester

Extrator de endereços de e-mail

maldevel
⭐ 999 Python 👤 maldevel User 🕐 Atualizado 2026-06-07 📅 Criado 2016-04-16
234
runesleo/x-reader

Servidor MCP de leitor de conteúdo universal para mais de 10 plataformas

runesleo
⭐ 992 Python 👤 runesleo User 🕐 Atualizado 2026-11-11 📅 Criado 2026-02-22
235
borisbabic/browser_cookie3

Este é um fork do browser_cookie

borisbabic
⭐ 989 Python 👤 borisbabic User 🕐 Atualizado 2024-12-20 📅 Criado 2015-04-26
236
MinorJerry/WebVoyager

Código para "WebVoyager: WebVoyager: Construindo um Agente Web Ponta a Ponta com Grandes Modelos Multimodais"

MinorJerry
⭐ 986 Python 👤 MinorJerry User 🕐 Atualizado 2024-03-04 📅 Criado 2024-01-24
237
YaoZeyuan/zhihuhelp

Reescrevendo o Zhihu Helper com base em Node e TypeScript

YaoZeyuan
⭐ 985 TypeScript 👤 YaoZeyuan User 🕐 Atualizado 2026-10-24 📅 Criado 2019-02-04
238
nicoxiang/geektime-downloader

Geek Time Course Downloader, suporta o download de colunas, cursos em vídeo, lições diárias, práticas de grandes empresas e vídeos de acampamentos de treinamento do Geek Time

nicoxiang
⭐ 982 Go 👤 nicoxiang User 🕐 Atualizado 2026-11-19 📅 Criado 2022-03-12
239
romansky/dom-to-semantic-markdown

DOM para Markdown Semântico para uso com LLMs

romansky
⭐ 976 TypeScript 👤 romansky User 🕐 Atualizado 2025-05-21 📅 Criado 2024-07-22
241
cutetailbud/ff-ruyijs

Este é um navegador headless leve, desenvolvido especificamente para que agentes de IA (como o Codex ou o Claude Code) executem tarefas de automação de navegador. Ele foi projetado para lidar com diversos sistemas de proteção da Web, processos de login e cenários de engenharia reversa.

cutetailbud
⭐ 968 C++ 👤 cutetailbud User 🕐 Atualizado 2026-11-19 📅 Criado 2026-10-28
242
treetrum/amazon-kindle-bulk-downloader

Permite baixar em massa todos os seus eBooks Kindle de uma forma mais automatizada. Esta ferramenta permite criar cópias de segurança dos livros que você já comprou.

treetrum
⭐ 968 TypeScript 👤 treetrum User 🕐 Atualizado 2025-02-27 📅 Criado 2023-04-07
244
HtmlUnit/htmlunit

HtmlUnit é um "navegador sem interface gráfica para programas Java".

HtmlUnit
⭐ 951 JavaScript 👤 HtmlUnit Organization 🕐 Atualizado 2026-11-21 📅 Criado 2018-09-02
245
JUk1-GH/gpt-promo-scanner

Ferramenta de verificação automática de códigos promocionais ChatGPT Team (Business) — descoberta em lote/validação/coleta de preços, suporta 34 códigos em 17 países, até 71% de desconto | ChatGPT Business promo code scanner — batch discovery, validation, price collection, 34 codes across 17 countries, up to 71% off

JUk1-GH
⭐ 948 Python 👤 JUk1-GH User 🕐 Atualizado 2026-05-15 📅 Criado 2026-05-11
246
SickleSec/SnowEyes

Uma extensão do Chrome para detecção de informações sensíveis e identificação de impressões digitais em páginas web

SickleSec
⭐ 946 JavaScript 👤 SickleSec User 🕐 Atualizado 2026-08-10 📅 Criado 2024-12-27
247
BullsEye0/dorks-eye

Dorks Eye: Script de Raspagem e Pesquisa de Dorks de Google Hacking. Dorks Eye é um script que fiz em python 3. Com esta ferramenta, você pode encontrar facilmente Google Dorks. O Dork Eye coleta páginas web e aplicações potencialmente vulneráveis na Internet, ou outras informações fantásticas que são captadas pelos bots de pesquisa do Google. Autor: Jolanda de Koff

BullsEye0
⭐ 940 Python 👤 BullsEye0 User 🕐 Atualizado 2026-10-01 📅 Criado 2020-04-30
248
caseychu/spotify-backup

Um script Python que exporta todas as suas playlists do Spotify.

caseychu
⭐ 937 Python 👤 caseychu User 🕐 Atualizado 2024-09-22 📅 Criado 2014-12-24
249
facundoolano/feedi

Um leitor de feeds pessoal

facundoolano
⭐ 933 Python 👤 facundoolano User 🕐 Atualizado 2026-09-19 📅 Criado 2023-07-15
250
browser-use/awesome-prompts

Tabela de prompts incríveis de Uso do Navegador

browser-use
⭐ 926 👤 browser-use Organization 🕐 Atualizado 2025-03-26 📅 Criado 2025-03-26