Git Stars Git Stars

#webscraping Repositórios

Descubra 50 repositórios ativos de código aberto no GitHub marcados com #webscraping, acumulando um total de 581,593 estrelas (uma média de 11,631 por projeto). O líder deste tópico é firecrawl/firecrawl, com 205,758 estrelas.

50
Total de Repositórios
581,593
Total de estrelas
11,631
Média de Estrelas/Repositório

50 repositórios no total

1
firecrawl/firecrawl

Infraestrutura de conhecimento para tornar seus agentes mais inteligentes. Pesquise, extraia e acesse dados de mais de 550 provedores por meio de uma única API.

firecrawl
⭐ 205,758 TypeScript 👤 firecrawl Organization 🕐 Atualizado 2026-11-21 📅 Criado 2024-04-15
2
D4Vinci/Scrapling

🕷️ O MELHOR framework de web scraping, que dá conta de tudo, desde uma única solicitação até uma coleta em grande escala! Não seja tímido: participe aqui https://discord.gg/EMgGbDceNQ e siga-nos aqui para receber dicas e truques diários: https://x.com/Scrapling_dev

D4Vinci
⭐ 104,760 Python 👤 D4Vinci User 🕐 Atualizado 2026-11-17 📅 Criado 2024-10-13
3
huginn/huginn

Crie agentes que monitoram e agem em seu nome. Seus agentes estão aguardando!

huginn
⭐ 50,601 Ruby 👤 huginn Organization 🕐 Atualizado 2026-11-21 📅 Criado 2013-03-10
4
CloakHQ/CloakBrowser

Chromium furtivo que passa em todos os testes de detecção de bots. Substituto direto do Playwright com patches de impressão digital no nível do código-fonte. Mais de 50 testes aprovados.

CloakHQ
⭐ 33,007 Python 👤 CloakHQ Organization 🕐 Atualizado 2026-11-20 📅 Criado 2026-02-22
5
ScrapeGraphAI/Scrapegraph-ai

Extrator Python baseado em IA

ScrapeGraphAI
⭐ 32,877 Python 👤 ScrapeGraphAI Organization 🕐 Atualizado 2026-10-06 📅 Criado 2024-01-27
6
assafelovic/gpt-researcher

Um agente autônomo que realiza pesquisas profundas em qualquer dado usando qualquer provedor de LLM

assafelovic
⭐ 30,810 Python 👤 assafelovic User 🕐 Atualizado 2026-11-12 📅 Criado 2023-05-12
7
getmaxun/maxun

Transforme qualquer site em uma API estruturada. Extraia, automatize, pesquise e monitore a web.

getmaxun
⭐ 18,538 TypeScript 👤 getmaxun Organization 🕐 Atualizado 2026-11-20 📅 Criado 2023-10-23
8
pystardust/ani-cli

Uma ferramenta de linha de comando para navegar e assistir animes

pystardust
⭐ 14,142 Shell 👤 pystardust User 🕐 Atualizado 2026-11-20 📅 Criado 2021-06-09
9
daijro/camoufox

🦊 Navegador antideteção

daijro
⭐ 13,533 C 👤 daijro User 🕐 Atualizado 2026-11-19 📅 Criado 2024-07-26
10
lorien/awesome-web-scraping

Lista de bibliotecas, ferramentas e APIs para web scraping e processamento de dados.

lorien
⭐ 8,242 JavaScript 👤 lorien User 🕐 Atualizado 2026-11-21 📅 Criado 2015-08-12
11
alirezamika/autoscraper

Um Extrator de dados da web Inteligente, Automático, Rápido e Leve para Python

alirezamika
⭐ 8,102 Python 👤 alirezamika User 🕐 Atualizado 2026-07-29 📅 Criado 2020-08-31
12
Kaliiiiiiiiii-Vinyzu/patchright

Versão não detectada da biblioteca de teste e automação Playwright.

Kaliiiiiiiiii-Vinyzu
⭐ 5,227 TypeScript 👤 Kaliiiiiiiiii-Vinyzu Organization 🕐 Atualizado 2026-11-13 📅 Criado 2023-11-07
13
niespodd/browser-fingerprinting

Análise dos sistemas de Proteção de Bots com contramedidas disponíveis 🚿. Como derrotar o sistema anti-bot 👻 e contornar scripts de impressão digital de navegador 🕵️‍♂️ ao fazer web scraping?

niespodd
⭐ 5,171 JavaScript 👤 niespodd User 🕐 Atualizado 2026-07-27 📅 Criado 2021-01-23
14
jaypyles/Scraperr

Webscraper auto-hospedado.

jaypyles
⭐ 4,876 TypeScript 👤 jaypyles User 🕐 Atualizado 2025-10-12 📅 Criado 2024-07-06
15
itsOwen/CyberScraper-2077

Um poderoso web scraper alimentado por LLM | OpenAI, Gemini e Ollama

itsOwen
⭐ 3,302 Python 👤 itsOwen User 🕐 Atualizado 2026-10-12 📅 Criado 2024-08-17
16
GodsScion/Auto_job_applier_linkedIn

Facilite sua busca de emprego automatizando seu processo de candidatura com este Aplicador Automático

GodsScion
⭐ 3,049 Python 👤 GodsScion User 🕐 Atualizado 2026-11-08 📅 Criado 2023-06-17
17
oss-invisible/playwright

Playwright invisível: um Playwright que os sistemas antibot não conseguem detectar, sem captchas: a mesma API, Firefox headless furtivo com proteção contra detecção, impressão digital indetectável, contorna a detecção de bots, web scraping e automação de navegador com Python.

oss-invisible
⭐ 2,612 Python 👤 oss-invisible Organization 🕐 Atualizado 2026-11-21 📅 Criado 2026-05-13
18
scrapoxy/scrapoxy

Scrapoxy foi descontinuado.

scrapoxy
⭐ 2,402 👤 scrapoxy User 🕐 Atualizado 2026-02-07 📅 Criado 2015-08-28
19
anaskhan96/soup

Web Scraper em Go, semelhante ao BeautifulSoup

anaskhan96
⭐ 2,302 Go 👤 anaskhan96 User 🕐 Atualizado 2026-10-24 📅 Criado 2017-02-23
20
reworkd/tarsier

Ferramentas de visão para agentes de interação web 👀

reworkd
⭐ 1,746 Jupyter Notebook 👤 reworkd Organization 🕐 Atualizado 2024-11-25 📅 Criado 2023-11-09
21
ProxyShard/ShardBrowser

Launcher de navegador anti-detecção, gratuito e de código aberto, para web scraping e gerenciamento de múltiplas contas. Desenvolvido pela equipe ShardX (anteriormente ProxyShard). Spoofing de impressão digital em nível de mecanismo no Chromium 158 (WebGL / WebGPU / Client Hints / fontes / TLS), mais de 220 perfis de dispositivos incluídos e QUIC + WebRTC estáveis por meio de SOCKS5.

ProxyShard
⭐ 1,735 TypeScript 👤 ProxyShard User 🕐 Atualizado 2026-11-21 📅 Criado 2026-05-30
22
TheWebScrapingClub/webscraping-from-0-to-hero

O repositório do projeto aberto de web scraping visa compartilhar conhecimento e experiências sobre raspagem de dados (web scraping) com Python

TheWebScrapingClub
⭐ 1,695 👤 TheWebScrapingClub Organization 🕐 Atualizado 2024-05-27 📅 Criado 2022-05-26
23
zohaibbashir/Google-Maps-Scrapper

Este código é usado para realizar web scraping e extração de dados do Google Maps. Ele é especialmente projetado para obter informações sobre empresas, incluindo nome, endereço, site, número de telefone, avaliações e mais.

zohaibbashir
⭐ 1,651 Python 👤 zohaibbashir User 🕐 Atualizado 2026-05-18 📅 Criado 2023-10-17
24
Kaliiiiiiiiii-Vinyzu/patchright-python

Versão Python não detectada da biblioteca Playwright de testes e automação.

Kaliiiiiiiiii-Vinyzu
⭐ 1,603 Python 👤 Kaliiiiiiiiii-Vinyzu Organization 🕐 Atualizado 2026-11-10 📅 Criado 2024-11-02
25
requests-cache/requests-cache

Cache HTTP persistente para requisições python

requests-cache
⭐ 1,511 Python 👤 requests-cache Organization 🕐 Atualizado 2026-11-20 📅 Criado 2012-04-12
26
cdpdriver/zendriver

Um framework de web scraping/automação web extremamente rápido, assíncrono por natureza e indetectável, baseado em ultrafunkamsterdam/nodriver. Agora com suporte a Docker!

cdpdriver
⭐ 1,483 Python 👤 cdpdriver Organization 🕐 Atualizado 2026-11-21 📅 Criado 2024-10-19
27
m8sec/CrossLinked

Ferramenta de enumeração do LinkedIn para extrair nomes válidos de funcionários de uma organização através da raspagem de mecanismos de busca

m8sec
⭐ 1,455 Python 👤 m8sec User 🕐 Atualizado 2024-11-26 📅 Criado 2019-05-16
28
jamesturk/scrapeghost

👻 Biblioteca experimental para raspar sites usando a API GPT da OpenAI.

jamesturk
⭐ 1,439 Python 👤 jamesturk User 🕐 Atualizado 2026-01-14 📅 Criado 2023-03-18
29
feder-cr/invisible_puppeteer

Puppeteer para Python que os sistemas antibots não conseguem detectar, sem captchas: a mesma API, Firefox headless furtivo com proteção contra detecção, uma impressão digital indetectável, evasão da detecção de bots, scraping da web e automação do navegador.

feder-cr
⭐ 1,403 Python 👤 feder-cr User 🕐 Atualizado 2026-10-19 📅 Criado 2024-09-01
30
raznem/parsera

Biblioteca leve para raspagem de websites com LLMs

raznem
⭐ 1,372 Python 👤 raznem User 🕐 Atualizado 2025-12-17 📅 Criado 2024-08-12
31
mov-cli/mov-cli

Assista a tudo diretamente do seu terminal.

mov-cli
⭐ 1,313 Python 👤 mov-cli Organization 🕐 Atualizado 2025-10-05 📅 Criado 2022-03-11
32
ovobrowsersupport/ovobrowser

Mecanismo de impressão digital do Chromium em nível de código-fonte, classificado pelos sites de detecção como um Chrome comum. Mecanismo de impressão digital do Chromium em nível de código-fonte que passa nos testes de detecção de bots. Não é injeção de JS — são patches de C++ compilados no binário.

ovobrowsersupport
⭐ 1,277 👤 ovobrowsersupport User 🕐 Atualizado 2026-11-16 📅 Criado 2026-08-23
33
scrapfly/scrapfly-scrapers

Scripts escaláveis de web scraping em Python para mais de 80 domínios populares

scrapfly
⭐ 1,133 Python 👤 scrapfly Organization 🕐 Atualizado 2026-11-21 📅 Criado 2023-05-22
34
openzim/zimit

Crie um arquivo ZIM de qualquer site e navegue offline!

openzim
⭐ 872 Python 👤 openzim Organization 🕐 Atualizado 2026-11-18 📅 Criado 2016-06-21
35
oss-invisible/playwright_mcp

Invisible Playwright MCP: servidor Playwright MCP indetectável por sistemas antibot e CAPTCHAs: um agente de IA navega na web usando Firefox furtivo com proteção contra detecção, Python, automação de navegador indetectável, raspagem de dados e uso do computador.

oss-invisible
⭐ 869 Python 👤 oss-invisible Organization 🕐 Atualizado 2026-11-20 📅 Criado 2026-09-29
36
vil/H4X-Tools

Um conjunto modular e baseado em terminal de ferramentas para OSINT, reconhecimento e coleta de dados - desenvolvido em Python, roda em Linux e Windows.

vil
⭐ 857 Python 👤 vil User 🕐 Atualizado 2026-10-17 📅 Criado 2022-04-18
37
wodsuz/EasyApplyJobsBot

Um bot em Python para aplicar automaticamente a todos os empregos de Candidatura Fácil (Easy Apply) do Linkedin, Glassdoor, etc., com base nas suas preferências. Auto login, preenchimento automático de perguntas adicionais, aplicação automática!

wodsuz
⭐ 838 Python 👤 wodsuz User 🕐 Atualizado 2026-05-18 📅 Criado 2021-08-09
38
benibela/xidel

Ferramenta de linha de comando para baixar e extrair dados de páginas HTML/XML ou APIs JSON, usando CSS, XPath 3.0, XQuery 3.0, JSONiq ou correspondência de padrões. Também pode criar novos documentos XML/HTML/JSON ou documentos transformados.

benibela
⭐ 836 Pascal 👤 benibela User 🕐 Atualizado 2025-02-22 📅 Criado 2015-06-11
39
tiliondev/fortress

Motor Chromium furtivo que impede que scrapers e agentes de navegador sejam bloqueados com uma única alteração em uma linha de código.

tiliondev
⭐ 817 Python 👤 tiliondev Organization 🕐 Atualizado 2026-11-03 📅 Criado 2026-07-02
40
Kaliiiiiiiiii-Vinyzu/patchright-nodejs

Versão NodeJS não detectada da biblioteca de testes e automação Playwright.

Kaliiiiiiiiii-Vinyzu
⭐ 813 TypeScript 👤 Kaliiiiiiiiii-Vinyzu Organization 🕐 Atualizado 2026-11-10 📅 Criado 2024-11-02
41
Skallwar/suckit

Sugar a Internet

Skallwar
⭐ 812 Rust 👤 Skallwar User 🕐 Atualizado 2026-03-12 📅 Criado 2019-10-29
42
feder-cr/invisible_selenium

Selenium invisível para sistemas anti-bot, sem CAPTCHAs: a mesma API, Firefox headless furtivo com proteção contra detecção, impressão digital indetectável, evasão da detecção de bots, raspagem da web e automação de navegador com Python.

feder-cr
⭐ 808 Python 👤 feder-cr User 🕐 Atualizado 2026-10-19 📅 Criado 2024-08-16
43
hitarth-gg/zenshin

🔖 App de Streaming de Anime baseado em Web & Electron para 🐈s

hitarth-gg
⭐ 784 JavaScript 👤 hitarth-gg User 🕐 Atualizado 2026-05-24 📅 Criado 2024-08-14
44
ZacharyHampton/HomeHarvest

Pacote Python para raspagem de dados de propriedades imobiliárias

ZacharyHampton
⭐ 764 Python 👤 ZacharyHampton User 🕐 Atualizado 2025-12-26 📅 Criado 2023-09-15
45
z0m31en7/Uscrapper

Uscrapper Vanta: Mergulhe mais fundo na web com esta poderosa ferramenta de código aberto. Extraia insights valiosos com facilidade e eficiência, de fontes da web superficial e profunda. Potencialize sua mineração e análise de dados com as capacidades avançadas de Vanta. Rápido, confiável e fácil de usar, Uscrapper Vanta é a escolha definitiva para pesquisadores e analistas.

z0m31en7
⭐ 740 Python 👤 z0m31en7 User 🕐 Atualizado 2024-11-24 📅 Criado 2023-05-31
46
ScrapeGraphAI/scrapecraft

Editor de web scraping com tecnologia de IA e construtor de fluxo de trabalho visual. Crie, teste e implemente web scrapers usando linguagem natural. Desenvolvido por ScrapeGraphAI e LangGraph.

ScrapeGraphAI
⭐ 731 Python 👤 ScrapeGraphAI Organization 🕐 Atualizado 2025-12-26 📅 Criado 2025-07-01
47
scrapfly/Antibot-Detector

Deteção em tempo real de sistemas antibot, captchas e técnicas de fingerprinting. Identifica Cloudflare, Akamai, DataDome, reCAPTCHA, hCaptcha, Shape Security e muito mais, com pontuação de confiança e ferramentas avançadas de captura.

scrapfly
⭐ 636 JavaScript 👤 scrapfly Organization 🕐 Atualizado 2026-11-17 📅 Criado 2025-09-03
48
adrianhajdin/pricewise

Mergulhe no web scraping e construa um rastreador de preços para e-commerce com Next.js 13 em um único vídeo que ensina raspagem de dados, cron jobs, envio de e-mails, implantação e muito mais.

adrianhajdin
⭐ 583 TypeScript 👤 adrianhajdin User 🕐 Atualizado 2024-07-06 📅 Criado 2023-09-29
49
jpjacobpadilla/Stealth-Requests

Web-scraping indetectável e análise de HTML perfeita em Python!

jpjacobpadilla
⭐ 570 Python 👤 jpjacobpadilla User 🕐 Atualizado 2026-09-19 📅 Criado 2024-08-04
50
oxylabs/oxylabs-ai-studio-openclaw

Plugin oficial Openclaw do Oxylabs AI-Studio

oxylabs
⭐ 549 TypeScript 👤 oxylabs Organization 🕐 Atualizado 2026-09-16 📅 Criado 2026-02-26

Perguntas Frequentes

1

Qual é o repositório de #webscraping mais popular no GitHub?

O projeto de código aberto de #webscraping mais bem classificado no GitHub é firecrawl/firecrawl, com 205,758 estrelas. Infraestrutura de conhecimento para tornar seus agentes mais inteligentes. Pesquise, extraia e acesse dados de mais de 550 provedores por meio de uma única API.

2

Quais linguagens de programação são mais usadas nos repositórios de #webscraping?

Entre os projetos de #webscraping mais bem classificados no GitHub, as linguagens de programação mais comuns são Python, TypeScript, JavaScript, Ruby.

3

Como é calculada a classificação dos repositórios de #webscraping?

Acompanhamos 50 repositórios ativos de código aberto marcados com #webscraping (com mais de 500 estrelas), totalizando 581,593 estrelas e uma média de 11,631 estrelas por repositório. As classificações são atualizadas diariamente a partir da API do GitHub.