Git Stars Git Stars

#web-scraping Dépôts

381
Total des Dépôts
2.1M
Nombre total d'étoiles
5,636
Moyenne d'Étoiles/Dépôt
51
matthewmueller/x-ray

Le prochain web scraper. Percez le bruit <html>.

matthewmueller
⭐ 5,899 JavaScript 👤 matthewmueller User 🕐 Mis à jour 2026-08-31 📅 Créé 2015-02-05
52
omkarcloud/botasaurus

Le framework tout-en-un pour construire des scrapers invincibles

omkarcloud
⭐ 5,857 TypeScript 👤 omkarcloud Organization 🕐 Mis à jour 2026-11-13 📅 Créé 2023-05-09
53
executeautomation/mcp-playwright

Playwright Model Context Protocol Server - Outil pour automatiser les navigateurs et les API dans Claude Desktop, Cline, Cursor IDE et plus 🔌

executeautomation
⭐ 5,681 TypeScript 👤 executeautomation User 🕐 Mis à jour 2025-12-13 📅 Créé 2024-12-03
54
KnockOutEZ/wigolo

Le web de référence pour votre agent de codage IA — recherche locale, récupération, exploration et recherche via MCP. Pas de clés API, pas de cloud, 0 $/requête. Bêta publique.

KnockOutEZ
⭐ 5,560 TypeScript 👤 KnockOutEZ User 🕐 Mis à jour 2026-11-21 📅 Créé 2026-04-12
55
Kaliiiiiiiiii-Vinyzu/patchright

Version non détectée de la bibliothèque de test et d'automatisation Playwright.

Kaliiiiiiiiii-Vinyzu
⭐ 5,227 TypeScript 👤 Kaliiiiiiiiii-Vinyzu Organization 🕐 Mis à jour 2026-11-13 📅 Créé 2023-11-07
56
Manavarya09/design-extract

Extrayez le système de design complet de n'importe quel site web avec une seule commande. Jetons DTCG, sémantique+primitif+composé, serveur MCP pour Claude Code/Cursor/Windsurf, émetteurs multiplateformes (iOS SwiftUI, Android Compose, Flutter, WordPress), Tailwind v4, variables Figma, shadcn/ui, audit de santé CSS, remédiation WCAG, extension Chrome. MIT, Playwright, Node 20+.

Manavarya09
⭐ 5,180 HTML 👤 Manavarya09 User 🕐 Mis à jour 2026-11-18 📅 Créé 2026-04-15
57
ultrafunkamsterdam/nodriver

Successeur d'Undetected-Chromedriver. Fournit un framework ultra-rapide pour l'automatisation web, le web scraping, les bots et toute autre idée créative normalement entravée par des systèmes anti-bots gênants comme Captcha / CloudFlare / Imperva / hCaptcha.

ultrafunkamsterdam
⭐ 4,950 Python 👤 ultrafunkamsterdam User 🕐 Mis à jour 2026-10-26 📅 Créé 2024-02-20
58
jaypyles/Scraperr

Web scraper auto-hébergé.

jaypyles
⭐ 4,876 TypeScript 👤 jaypyles User 🕐 Mis à jour 2025-10-12 📅 Créé 2024-07-06
59
NanmiCoder/CrawlerTutorial

Introduction au web scraping, Perfectionnement au web scraping, Web scraping avancé

NanmiCoder
⭐ 4,873 Python 👤 NanmiCoder User 🕐 Mis à jour 2026-04-03 📅 Créé 2024-03-24
60
request/request-promise

Le client de requête HTTP simplifié 'request' avec prise en charge des promesses. Alimenté par Bluebird.

request
⭐ 4,734 JavaScript 👤 request Organization 🕐 Mis à jour 2024-01-31 📅 Créé 2013-10-04
61
REMitchell/python-scraping

Exemples de code du livre Web Scraping with Python http://shop.oreilly.com/product/0636920034391.do

REMitchell
⭐ 4,669 Jupyter Notebook 👤 REMitchell User 🕐 Mis à jour 2024-06-01 📅 Créé 2015-06-14
62
AhmadHassan-BTed/Noria

Un extracteur agentique pour les plateformes de messagerie. Noria reçoit des messages et des URL par chat, collecte des données sur le Web afin d’évaluer le contenu selon des grilles de notation personnalisées (par exemple, pour des offres d’emploi ou des bourses), puis envoie directement au numéro de messagerie attribué un résumé structuré assorti d’un score de correspondance calculé.

AhmadHassan-BTed
⭐ 4,624 JavaScript 👤 AhmadHassan-BTed User 🕐 Mis à jour 2026-11-10 📅 Créé 2026-05-31
63
linsomniac/spotify_to_ytmusic

Copier les playlists et la musique aimée de Spotify vers YTMusic

linsomniac
⭐ 4,588 Python 👤 linsomniac User 🕐 Mis à jour 2026-04-13 📅 Créé 2023-12-22
64
0xHJK/music-dl

rechercher et télécharger de la musique De NetEase Cloud Music, QQ Music, KuGou Music, Baidu Music, Xiami Music, MiGu Music, etc. rechercher et télécharger des chansons

0xHJK
⭐ 4,423 Python 👤 0xHJK User 🕐 Mis à jour 2025-08-12 📅 Créé 2019-01-08
65
ssut/py-googletrans

(non officiel) Googletrans : API de traduction Google gratuite et illimitée pour Python. Traduit totalement gratuitement.

ssut
⭐ 4,303 Python 👤 ssut User 🕐 Mis à jour 2026-08-08 📅 Créé 2015-06-05
66
RookieEnough/Orion-Store

Le meilleur endroit pour découvrir des applications open source et épurées. OrionStore donne instantanément accès à YouTube Morphe, YT Music Morphe et aux outils open source indispensables, sans encombrement. Pas de serveurs, pas de suivi : juste une passerelle élégante et moderne vers les applications que vous aimez.

RookieEnough
⭐ 4,285 Kotlin 👤 RookieEnough User 🕐 Mis à jour 2026-11-19 📅 Créé 2025-11-28
67
scrapinghub/splash

Navigateur léger et scriptable en tant que service avec une API HTTP

scrapinghub
⭐ 4,197 Python 👤 scrapinghub Organization 🕐 Mis à jour 2024-08-02 📅 Créé 2013-05-20
68
kalil0321/reverse-api-engineer

Faites de l’ingénierie inverse sur n’importe quel site web pour le transformer en client API typé. Compatible avec Claude Code, Codex, Cursor et OpenCode.

kalil0321
⭐ 4,088 Python 👤 kalil0321 User 🕐 Mis à jour 2026-11-21 📅 Créé 2025-12-23
69
snooppr/snoop

Snoop – un outil OSINT (Open Source Intelligence) basé sur les données ouvertes

snooppr
⭐ 4,072 Python 👤 snooppr User 🕐 Mis à jour 2026-11-20 📅 Créé 2020-02-14
70
IonicaBizau/scrape-it

🔮 Un scraper Node.js pour les humains.

IonicaBizau
⭐ 4,069 JavaScript 👤 IonicaBizau User 🕐 Mis à jour 2026-11-20 📅 Créé 2016-04-28
71
ericciarla/trendFinder

Restez au courant des sujets tendance sur les réseaux sociaux et sur le web grâce à l'IA

ericciarla
⭐ 4,016 TypeScript 👤 ericciarla User 🕐 Mis à jour 2025-02-17 📅 Créé 2024-12-31
72
osnr/TabFS

🗄 Montez vos onglets de navigateur comme un système de fichiers.

osnr
⭐ 3,916 JavaScript 👤 osnr User 🕐 Mis à jour 2024-12-28 📅 Créé 2019-02-26
73
Samueli924/chaoxing

Superstar Learning Cloud / Super Star Er Ya / Pan Ya Super Star Achèvement de tâches ininterrompu entièrement automatique

Samueli924
⭐ 3,883 Python 👤 Samueli924 User 🕐 Mis à jour 2026-09-28 📅 Créé 2020-11-20
74
sentient-agi/OpenDeepSearch

LLM basé sur la recherche SOTA

sentient-agi
⭐ 3,824 Python 👤 sentient-agi Organization 🕐 Mis à jour 2025-04-04 📅 Créé 2025-03-20
75
edoardottt/cariddi

Prenez une liste de domaines, explorez les URL et recherchez des points d'accès, des secrets, des clés d'API, des extensions de fichiers, des jetons et plus encore.

edoardottt
⭐ 3,817 Go 👤 edoardottt User 🕐 Mis à jour 2026-11-19 📅 Créé 2021-04-27
76
3441293738/creatorhub

Surveillance · collecte · republication de contenu multiplateforme. Un seul tableau de bord web pour gérer Douyin / Xiaohongshu / Kuaishou / les chaînes WeChat / TikTok / Bilibili / Instagram / Xiaohongshu à l’international (rednote)

3441293738
⭐ 3,774 Python 👤 3441293738 User 🕐 Mis à jour 2026-11-21 📅 Créé 2026-07-03
77
Anakin-Inc/anakin

API de web scraping open-source. Transformez n'importe quel site web en Markdown propre ou en JSON structuré. Navigateur anti-détection, sélection automatique de proxy, auto-hébergé. Une seule commande : make up

Anakin-Inc
⭐ 3,764 Go 👤 Anakin-Inc Organization 🕐 Mis à jour 2026-08-18 📅 Créé 2026-03-17
78
cv-cat/DouYin_Spider

Ingénierie inverse de TikTok, crawler TikTok, toutes les API TikTok, messages privés, surveillance des salles de diffusion en direct

cv-cat
⭐ 3,711 Python 👤 cv-cat User 🕐 Mis à jour 2026-10-23 📅 Créé 2023-10-17
79
oxylabs/amazon-scraper

API Scraper Amazon d'essai gratuit pour extraire les données de recherche, de produits, de listes d'offres, d'avis, de questions et réponses, de best-sellers et de vendeurs.

oxylabs
⭐ 3,417 Python 👤 oxylabs Organization 🕐 Mis à jour 2026-11-18 📅 Créé 2022-11-29
81
oxylabs/oxylabs-ai-studio-py

Collecte de données structurées à partir de n'importe quel site web à l'aide d'un scraper, d'un crawler et d'une automatisation de navigateur optimisés par l'IA. Scraping et crawling avec des invites en langage naturel. Équipez vos agents LLM de données fraîches. SDK Python AI Studio pour la collecte intelligente de données web.

oxylabs
⭐ 3,394 Python 👤 oxylabs Organization 🕐 Mis à jour 2026-08-21 📅 Créé 2025-06-17
82
vibheksoni/stealth-browser-mcp

Automatisation furtive du navigateur pour les agents d’IA via MCP et le protocole Chrome DevTools : navigation, hooks réseau, extraction du DOM et clonage d’interfaces utilisateur au pixel près.

vibheksoni
⭐ 3,384 Python 👤 vibheksoni User 🕐 Mis à jour 2026-11-20 📅 Créé 2025-08-09
83
php-curl-class/php-curl-class

PHP Curl Class facilite l'envoi de requêtes HTTP et l'intégration avec les API web.

php-curl-class
⭐ 3,293 PHP 👤 php-curl-class Organization 🕐 Mis à jour 2026-11-17 📅 Créé 2013-08-16
84
Virtual-Browser/VirtualBrowser

Navigateur anti-empreintes digitales gratuit, navigateur d'empreintes digitales, navigateur de confidentialité, navigateur anti-reconnaissance, navigateur anti-identification, navigateur anti-association, navigateur gratuit spécifique pour les airdrops Web3 par empreintes digitales https://virtualbrowser.cc/?src=github

Virtual-Browser
⭐ 3,282 Vue 👤 Virtual-Browser User 🕐 Mis à jour 2026-10-16 📅 Créé 2023-05-20
85
hydrusnetwork/hydrus

Un étiqueteur de médias personnel de style booru qui peut importer des fichiers et des étiquettes depuis votre disque dur et des sites web populaires. Le contenu peut être partagé avec d'autres utilisateurs via des serveurs gérés par les utilisateurs.

hydrusnetwork
⭐ 3,276 Python 👤 hydrusnetwork User 🕐 Mis à jour 2026-11-18 📅 Créé 2013-02-19
86
oxylabs/how-to-scrape-amazon-product-data

Le processus d'extraction de données de produits d'Amazon à l'aide de Python, y compris les titres, les évaluations, les prix, les images et les descriptions.

oxylabs
⭐ 3,248 Python 👤 oxylabs Organization 🕐 Mis à jour 2026-11-18 📅 Créé 2024-09-03
87
mitsuhiko/agent-stuff

Ce sont des commandes que j'utilise avec des agents, principalement Claude.

mitsuhiko
⭐ 3,223 TypeScript 👤 mitsuhiko User 🕐 Mis à jour 2026-09-27 📅 Créé 2025-11-02
88
scrapy/scrapyd

Un démon de service pour exécuter les spiders Scrapy

scrapy
⭐ 3,100 Python 👤 scrapy Organization 🕐 Mis à jour 2026-10-23 📅 Créé 2013-02-01
90
langchain-ai/social-media-agent

📲 Un agent pour l'approvisionnement, la curation et la planification de publications sur les réseaux sociaux avec une supervision humaine.

langchain-ai
⭐ 3,045 TypeScript 👤 langchain-ai Organization 🕐 Mis à jour 2026-11-18 📅 Créé 2024-11-21
91
TheBlewish/Automated-AI-Web-Researcher-Ollama

Un programme Python qui transforme un LLM, fonctionnant sur Ollama, en un chercheur automatisé, qui, avec une seule requête, déterminera les domaines de concentration à étudier, effectuera des recherches sur le web et extraira le contenu de divers sites web pertinents et fera des recherches pour vous en toute autonomie ! Et plus encore, sans s'y limiter, mais y compris la sauvegarde des résultats pour vous !

TheBlewish
⭐ 3,019 Python 👤 TheBlewish User 🕐 Mis à jour 2026-09-02 📅 Créé 2024-11-20
92
x4nth055/pythoncode-tutorials

Les Tutoriels de Code Python

x4nth055
⭐ 3,003 Jupyter Notebook 👤 x4nth055 User 🕐 Mis à jour 2026-09-30 📅 Créé 2019-07-29
93
vladkens/twscrape

Bibliothèque Python et CLI pour le scraping de X/Twitter avec rotation multi-comptes et gestion intégrée des limites de débit.

vladkens
⭐ 2,980 Python 👤 vladkens User 🕐 Mis à jour 2026-11-19 📅 Créé 2023-05-05
94
rust-headless-chrome/rust-headless-chrome

Une API de haut niveau pour contrôler Chrome ou Chromium sans tête via le protocole DevTools. C'est l'équivalent Rust de Puppeteer, une bibliothèque Node maintenue par l'équipe Chrome DevTools.

rust-headless-chrome
⭐ 2,960 Rust 👤 rust-headless-chrome Organization 🕐 Mis à jour 2026-06-11 📅 Créé 2018-09-18
95
oxylabs/how-to-scrape-google-trends

Apprenez étape par étape à scraper les données de Google Trends et à effectuer une comparaison des résultats à l'aide de Python et de l'API SERP d'Oxylabs. Extrayez les mots-clés, leur popularité, la répartition par région, les requêtes associées, et bien plus encore.

oxylabs
⭐ 2,907 Python 👤 oxylabs Organization 🕐 Mis à jour 2026-11-18 📅 Créé 2024-08-06
96
digininja/CeWL

CeWL est un générateur de liste de mots personnalisée

digininja
⭐ 2,896 Ruby 👤 digininja User 🕐 Mis à jour 2026-06-24 📅 Créé 2016-04-22
97
spider-rs/spider

Collecte fondamentale de données web à faible latence en Rust

spider-rs
⭐ 2,856 Rust 👤 spider-rs Organization 🕐 Mis à jour 2026-11-20 📅 Créé 2018-01-07
98
Geniusay/ChopperBot

Huya, Douyu, Douyin, BiliBili, TikTok, Twitch🔥Populaire🔥Robot IA intelligent pour le montage et la publication de vidéos live, Automatisation🤖, Entièrement intelligent⚙(génération automatique de clips, titres, miniatures, descriptions), Visualisation👓, Surveillance des plateformes populaires🌡, Plugins riches extensibles à volonté🕹, Déploiement rapide⚡, Publication automatique de comptes vidéo🌟, Support DIY🎮

Geniusay
⭐ 2,758 Java 👤 Geniusay User 🕐 Mis à jour 2025-08-04 📅 Créé 2023-04-27
99
levywang/avhub

Outil de recherche et de gestion des ressources R18

levywang
⭐ 2,742 Vue 👤 levywang User 🕐 Mis à jour 2026-04-18 📅 Créé 2025-03-07
100
brightdata/brightdata-mcp

Un serveur puissant Model Context Protocol (MCP) qui fournit une solution tout-en-un pour l'accès au Web public.

brightdata
⭐ 2,733 JavaScript 👤 brightdata Organization 🕐 Mis à jour 2026-11-18 📅 Créé 2025-04-15