Git Stars Git Stars

#web-scraping Dépôts

381
Total des Dépôts
2.1M
Nombre total d'étoiles
5,636
Moyenne d'Étoiles/Dépôt
151
Nutlope/turboseek

Un moteur de recherche IA inspiré par Perplexity

Nutlope
⭐ 1,660 TypeScript 👤 Nutlope User 🕐 Mis à jour 2026-10-23 📅 Créé 2024-05-26
152
oxylabs/ai-map-py

AI Map est un outil de cartographie de sites web alimenté par l'IA, développé par Oxylabs AI Studio, qui utilise des invites en langage naturel pour découvrir et extraire intelligemment les URL pertinentes de n'importe quel site web.

oxylabs
⭐ 1,651 👤 oxylabs Organization 🕐 Mis à jour 2026-04-02 📅 Créé 2025-10-29
153
orangecoding/fredy

❤️ Fredy - [F]ind [R]eal [E]state [D]amn Eas[y] (trouver un bien immobilier, super facilement) - Fredy continue de rechercher de nouveaux appartements, maisons et logements en Europe sur des plateformes comme ImmoScout24, Immowelt et eBay Kleinanzeigen, puis vous envoie instantanément les résultats via Slack, Telegram, e-mail, Discord ou ntfy, afin que vous puissiez vous concentrer sur les choses les plus importantes de la vie ;)

orangecoding
⭐ 1,648 JavaScript 👤 orangecoding User 🕐 Mis à jour 2026-11-19 📅 Créé 2018-01-15
154
Xetera/ghost-cursor

🖱️ Générez des mouvements de souris similaires à ceux d'un humain avec puppeteer ou sur n'importe quel plan 2D

Xetera
⭐ 1,634 TypeScript 👤 Xetera User 🕐 Mis à jour 2026-11-04 📅 Créé 2019-10-15
155
justmarkham/DAT8

Cours de Data Science de General Assembly 2015 à Washington, DC

justmarkham
⭐ 1,622 Jupyter Notebook 👤 justmarkham User 🕐 Mis à jour 2024-06-05 📅 Créé 2015-08-07
156
karust/openserp

Recherche Web auto-hébergée pour les agents d’IA et le SEO. Google, Bing, Yandex, Baidu, DuckDuckGo et Ecosia, affichés dans un véritable navigateur : résultats classés et Markdown propre des pages. API, CLI, MCP 🎉

karust
⭐ 1,605 Go 👤 karust User 🕐 Mis à jour 2026-11-19 📅 Créé 2023-06-23
157
Kaliiiiiiiiii-Vinyzu/patchright-python

Version Python non détectée de la bibliothèque de test et d'automatisation Playwright.

Kaliiiiiiiiii-Vinyzu
⭐ 1,603 Python 👤 Kaliiiiiiiiii-Vinyzu Organization 🕐 Mis à jour 2026-11-10 📅 Créé 2024-11-02
158
ulixee/hero

Le navigateur Web conçu pour le scraping

ulixee
⭐ 1,557 TypeScript 👤 ulixee Organization 🕐 Mis à jour 2026-05-16 📅 Créé 2021-07-28
159
dteviot/WebToEpub

Une extension simple pour Chrome (et Firefox) qui convertit les romans web (et d'autres pages web) en EPUB.

dteviot
⭐ 1,544 JavaScript 👤 dteviot User 🕐 Mis à jour 2026-11-20 📅 Créé 2015-11-23
160
headzoo/surf

Navigation web programmatique avec état en Go.

headzoo
⭐ 1,533 Go 👤 headzoo User 🕐 Mis à jour 2024-01-24 📅 Créé 2014-08-25
161
0x676e67/wreq-python

Un client HTTP Python ergonomique et respectueux de la vie privée

0x676e67
⭐ 1,526 Python 👤 0x676e67 User 🕐 Mis à jour 2026-11-15 📅 Créé 2025-02-10
162
tidyverse/rvest

Web scraping simple pour R

tidyverse
⭐ 1,524 R 👤 tidyverse Organization 🕐 Mis à jour 2026-10-27 📅 Créé 2014-07-23
163
tinyfish-io/agentql

AgentQL est une suite d'outils pour connecter votre IA au web. Doté d'un langage de requête et d'intégrations Playwright pour interagir avec les éléments et extraire des données rapidement, avec précision et à grande échelle. Comprend une API REST, des SDK Python et JavaScript, un débogueur de navigateur.

tinyfish-io
⭐ 1,510 Python 👤 tinyfish-io Organization 🕐 Mis à jour 2026-11-21 📅 Créé 2024-02-20
164
liguobao/HouseSearch

Recherchez un logement à louer sur la carte : épuisé de parcourir toute la ville à la recherche d’une location ? Essayez une autre méthode et cherchez directement votre location sur la carte ! [Compte officiel et mini-programme WeChat : 人生删除指南]

liguobao
⭐ 1,495 JavaScript 👤 liguobao User 🕐 Mis à jour 2026-11-14 📅 Créé 2016-08-07
165
antonmedv/finder

Générateur de sélecteurs CSS 🗺

antonmedv
⭐ 1,491 HTML 👤 antonmedv User 🕐 Mis à jour 2025-11-20 📅 Créé 2018-02-20
166
rebrowser/rebrowser-patches

Collection de correctifs pour puppeteer et playwright afin d'éviter la détection d'automatisation et les fuites. Aide à éviter les pages CAPTCHA de Cloudflare et DataDome. Facile à patcher/dépatcher, peut être activé/désactivé à la demande.

rebrowser
⭐ 1,468 JavaScript 👤 rebrowser Organization 🕐 Mis à jour 2026-11-02 📅 Créé 2024-08-06
167
ScrapingBee/chatgpt-scraper-api

Collectez des réponses structurées à partir d'un scraper ChatGPT en envoyant une invite avec des identifiants API de scraping ChatGPT valides. Activez la recherche en direct, injectez le contexte HTML et automatisez des flux de travail intelligents de scraper ChatGPT en quelques paramètres seulement.

ScrapingBee
⭐ 1,465 👤 ScrapingBee Organization 🕐 Mis à jour 2026-07-15 📅 Créé 2026-03-12
168
Surfer-Org/Protocol

Framework open-source pour exporter vos données personnelles.

Surfer-Org
⭐ 1,462 TypeScript 👤 Surfer-Org Organization 🕐 Mis à jour 2024-12-25 📅 Créé 2024-08-09
169
austin-weeks/miasma

Piégez les scrapers web IA dans une fosse de poison sans fin.

austin-weeks
⭐ 1,459 Rust 👤 austin-weeks User 🕐 Mis à jour 2026-11-05 📅 Créé 2026-03-18
170
roach-php/core

La boîte à outils complète de web scraping pour PHP.

roach-php
⭐ 1,456 PHP 👤 roach-php Organization 🕐 Mis à jour 2025-10-27 📅 Créé 2021-08-17
171
wordware-ai/twitter

Agent IA pour l'analyse de la personnalité sur Twitter

wordware-ai
⭐ 1,446 TypeScript 👤 wordware-ai Organization 🕐 Mis à jour 2026-08-02 📅 Créé 2024-06-03
172
mattsse/chromiumoxide

API Rust pour Chrome Devtools Protocol

mattsse
⭐ 1,437 Rust 👤 mattsse User 🕐 Mis à jour 2026-04-03 📅 Créé 2020-11-28
173
Miserlou/SoundScrape

Téléchargeur SoundCloud (et Bandcamp et Mixcloud) en Python.

Miserlou
⭐ 1,436 Python 👤 Miserlou User 🕐 Mis à jour 2024-06-23 📅 Créé 2013-12-29
174
foxhui/WebAI2API

WebAI2API : Outil de conversion d'IA web en API basé sur Camoufox, compatible avec LMArena/Gemini et plus, concurrence multi-fenêtres et isolation des comptes. | Web AI vers OpenAI API via Camoufox. Prend en charge LMArena/Gemini et plus, concurrence multi-fenêtres & isolation des comptes.

foxhui
⭐ 1,429 JavaScript 👤 foxhui User 🕐 Mis à jour 2026-07-10 📅 Créé 2025-11-23
175
oxylabs/how-to-scrape-google-finance

Utilisez l'API Web Scraper pour extraire des données de Google Finance, y compris les titres boursiers, les prix et les variations de prix en pourcentage.

oxylabs
⭐ 1,403 Python 👤 oxylabs Organization 🕐 Mis à jour 2025-09-23 📅 Créé 2024-09-25
176
feder-cr/invisible_puppeteer

Puppeteer pour Python indétectable par les systèmes anti-bots, sans CAPTCHA : la même API, Firefox headless furtif et anti-détection, une empreinte numérique indétectable, contournement de la détection des bots, scraping web et automatisation du navigateur.

feder-cr
⭐ 1,403 Python 👤 feder-cr User 🕐 Mis à jour 2026-10-19 📅 Créé 2024-09-01
177
mckaywrigley/clarity-ai

Un clone de Perplexity.

mckaywrigley
⭐ 1,401 TypeScript 👤 mckaywrigley User 🕐 Mis à jour 2024-03-28 📅 Créé 2023-02-19
178
facundoolano/app-store-scraper

Extraire des données de l'iTunes App Store

facundoolano
⭐ 1,396 JavaScript 👤 facundoolano User 🕐 Mis à jour 2025-07-27 📅 Créé 2016-05-31
179
regenrek/deepwiki-mcp

📖 Serveur MCP pour récupérer deepwiki.com et obtenir les dernières connaissances dans Cursor et d'autres éditeurs de code

regenrek
⭐ 1,393 TypeScript 👤 regenrek User 🕐 Mis à jour 2026-03-20 📅 Créé 2025-04-28
180
sardanioss/httpcloak

Client HTTP Go avec reconnaissance de traits TLS/HTTP2 identique à celle du navigateur. Contournement de la détection de bots en reproduisant parfaitement Chrome, Firefox et Safari au niveau cryptographique (JA3/JA4, empreinte Akamai, ordre des en-têtes). Prend en charge HTTP/1.1, HTTP/2, HTTP/3, sessions, cookies et proxys.

sardanioss
⭐ 1,387 Go 👤 sardanioss User 🕐 Mis à jour 2026-11-14 📅 Créé 2025-12-28
181
MiniGlome/Archive.org-Downloader

Script Python3 pour télécharger des livres archive.org au format PDF

MiniGlome
⭐ 1,385 Python 👤 MiniGlome User 🕐 Mis à jour 2026-09-27 📅 Créé 2021-02-17
182
fugary/calibre-douban

Nouveau plugin de source de métadonnées Douban pour Calibre. Douban ne fournit plus d'API de livres au public, il ne peut donc utiliser que le web crawling pour obtenir des données. Ceci est un plugin Calibre Douban basé sur le web crawling.

fugary
⭐ 1,382 Python 👤 fugary User 🕐 Mis à jour 2025-11-08 📅 Créé 2021-12-12
183
firecrawl/open-scouts

🔥 Plateforme de surveillance web alimentée par l'IA. Créez des éclaireurs automatisés qui parcourent le web et envoient des alertes par e‑mail lorsqu'ils trouvent ce que vous cherchez.

firecrawl
⭐ 1,372 TypeScript 👤 firecrawl Organization 🕐 Mis à jour 2026-11-13 📅 Créé 2025-11-28
184
sourcegraph/webloop

WebLoop : WebKit scriptable et sans tête avec une API Go. Comme PhantomJS, mais pour Go.

sourcegraph
⭐ 1,366 Go 👤 sourcegraph Organization 🕐 Mis à jour 2024-04-01 📅 Créé 2013-10-27
185
philippta/flyscrape

Flyscrape est un outil de web scraping en ligne de commande conçu pour ceux qui n'ont pas de compétences avancées en programmation.

philippta
⭐ 1,347 Go 👤 philippta User 🕐 Mis à jour 2025-11-24 📅 Créé 2023-08-28
186
Sniper970119/dianping_spider

Crawler Dianping (peut parcourir tout le site, résout le cryptage des polices dynamiques, pas d'OCR). Mise à jour continue

Sniper970119
⭐ 1,329 Python 👤 Sniper970119 User 🕐 Mis à jour 2026-11-03 📅 Créé 2021-01-22
187
firecrawl/fire-enrich

Outil d'enrichissement de données alimenté par l'IA qui transforme les e-mails en ensembles de données riches avec des profils d'entreprise, des données de financement, des piles technologiques et plus encore en utilisant Firecrawl et une IA multi-agents

firecrawl
⭐ 1,308 TypeScript 👤 firecrawl Organization 🕐 Mis à jour 2026-10-26 📅 Créé 2025-06-06
188
AI4Finance-Foundation/FinNLP

Démocratiser les données financières à l'échelle d'Internet.

AI4Finance-Foundation
⭐ 1,292 Jupyter Notebook 👤 AI4Finance-Foundation Organization 🕐 Mis à jour 2024-07-01 📅 Créé 2023-02-07
189
kkangert/kspider

Kspider est une plateforme de crawling qui permet de définir des workflows de crawling de manière graphique, permettant de réaliser un workflow de crawling sans code. Kspider ne se limite pas au crawling web, mais peut également être utilisé pour les tests d'automatisation WEB. D'autres fonctionnalités vous attendent à découvrir.

kkangert
⭐ 1,285 Java 👤 kkangert User 🕐 Mis à jour 2024-08-19 📅 Créé 2024-07-07
190
fastcrw/crw

Alternative rapide et légère à Firecrawl/Tavily en Rust. API de web scraping, crawler et recherche avec serveur MCP pour agents IA. API compatible avec Firecrawl (/scrape, /crawl, /search). 2,3x plus rapide que Tavily, 1,5x plus rapide que Firecrawl sur des benchmarks de 1K URL. 6 Mo de RAM, binaire unique. Auto-hébergement ou cloud géré.

fastcrw
⭐ 1,284 Rust 👤 fastcrw Organization 🕐 Mis à jour 2026-11-21 📅 Créé 2026-03-02
191
techwithtim/Price-Tracking-Web-Scraper

Un traqueur de prix automatisé utilisant Bright Data, Playwright, React et Flask.

techwithtim
⭐ 1,284 Python 👤 techwithtim User 🕐 Mis à jour 2024-10-17 📅 Créé 2023-06-23
192
ovobrowsersupport/ovobrowser

Moteur d’empreinte numérique Chromium au niveau du code source, évalué comme un Chrome ordinaire par les sites de détection. Moteur d’empreinte numérique Chromium au niveau du code source qui passe les tests de détection des bots. Il ne s’agit pas d’une injection JavaScript, mais de correctifs C++ compilés dans le binaire.

ovobrowsersupport
⭐ 1,277 👤 ovobrowsersupport User 🕐 Mis à jour 2026-11-16 📅 Créé 2026-08-23
193
raawaa/jav-scrapy

Le travailleur acharné pour la récupération par lots de liens magnétiques AV ou couvertures

raawaa
⭐ 1,275 JavaScript 👤 raawaa User 🕐 Mis à jour 2026-10-17 📅 Créé 2015-10-31
194
TaxyAI/browser-extension

Automatisez votre navigateur avec GPT-4

TaxyAI
⭐ 1,269 TypeScript 👤 TaxyAI Organization 🕐 Mis à jour 2025-01-15 📅 Créé 2023-03-27
195
chromedp/examples

exemples de code chromedp.

chromedp
⭐ 1,265 Go 👤 chromedp Organization 🕐 Mis à jour 2026-11-18 📅 Créé 2017-12-26
196
Decodo/Decodo

Proxies résidentiels rotatifs HTTP(S)/SOCKS5 - exemples de code et informations générales.

Decodo
⭐ 1,264 Java 👤 Decodo Organization 🕐 Mis à jour 2026-11-11 📅 Créé 2019-01-07
197
MarioVilas/googlesearch

Recherche Google depuis Python (non officiel).

MarioVilas
⭐ 1,249 Python 👤 MarioVilas User 🕐 Mis à jour 2025-11-11 📅 Créé 2012-10-22
198
kairi003/Get-cookies.txt-LOCALLY

Obtenez cookies.txt, n'envoyez JAMAIS d'informations à l'extérieur.

kairi003
⭐ 1,230 JavaScript 👤 kairi003 User 🕐 Mis à jour 2025-10-07 📅 Créé 2023-03-01
199
mika-cn/maoxian-web-clipper

Une extension web pour clipper des informations depuis une page web. Enregistrez-la sur votre machine locale pour éviter l'invalidation des informations. Pas d'inscription ennuyeuse, pas de frais.

mika-cn
⭐ 1,230 JavaScript 👤 mika-cn User 🕐 Mis à jour 2026-08-23 📅 Créé 2018-08-09
200
eooce/Auto-login-netlib

Connexion automatique au site web netlib.re pour maintenir le domaine actif

eooce
⭐ 1,220 JavaScript 👤 eooce User 🕐 Mis à jour 2025-11-08 📅 Créé 2025-11-06