Git Stars Git Stars

#scraping Dépôts

109
Total des Dépôts
768,143
Nombre total d'étoiles
7,047
Moyenne d'Étoiles/Dépôt
51
tinyfish-io/agentql

AgentQL est une suite d'outils pour connecter votre IA au web. Doté d'un langage de requête et d'intégrations Playwright pour interagir avec les éléments et extraire des données rapidement, avec précision et à grande échelle. Comprend une API REST, des SDK Python et JavaScript, un débogueur de navigateur.

tinyfish-io
⭐ 1,510 Python 👤 tinyfish-io Organization 🕐 Mis à jour 2026-11-21 📅 Créé 2024-02-20
52
rebrowser/rebrowser-patches

Collection de correctifs pour puppeteer et playwright afin d'éviter la détection d'automatisation et les fuites. Aide à éviter les pages CAPTCHA de Cloudflare et DataDome. Facile à patcher/dépatcher, peut être activé/désactivé à la demande.

rebrowser
⭐ 1,468 JavaScript 👤 rebrowser Organization 🕐 Mis à jour 2026-11-02 📅 Créé 2024-08-06
53
ScrapingBee/chatgpt-scraper-api

Collectez des réponses structurées à partir d'un scraper ChatGPT en envoyant une invite avec des identifiants API de scraping ChatGPT valides. Activez la recherche en direct, injectez le contexte HTML et automatisez des flux de travail intelligents de scraper ChatGPT en quelques paramètres seulement.

ScrapingBee
⭐ 1,465 👤 ScrapingBee Organization 🕐 Mis à jour 2026-07-15 📅 Créé 2026-03-12
54
okfn-brasil/querido-diario

📰 Journaux officiels brésiliens accessibles à tous | 📰 Gazettes gouvernementales brésiliennes, accessibles à tous.

okfn-brasil
⭐ 1,424 Python 👤 okfn-brasil Organization 🕐 Mis à jour 2026-10-12 📅 Créé 2018-04-01
55
feder-cr/invisible_puppeteer

Puppeteer pour Python indétectable par les systèmes anti-bots, sans CAPTCHA : la même API, Firefox headless furtif et anti-détection, une empreinte numérique indétectable, contournement de la détection des bots, scraping web et automatisation du navigateur.

feder-cr
⭐ 1,403 Python 👤 feder-cr User 🕐 Mis à jour 2026-10-19 📅 Créé 2024-09-01
56
raznem/parsera

Bibliothèque légère pour le scraping de sites Web avec des LLM

raznem
⭐ 1,372 Python 👤 raznem User 🕐 Mis à jour 2025-12-17 📅 Créé 2024-08-12
57
lorey/mlscraper

🤖 Scrapez des données de sites Web HTML automatiquement en fournissant simplement des exemples

lorey
⭐ 1,370 Python 👤 lorey User 🕐 Mis à jour 2024-03-17 📅 Créé 2020-07-30
58
scrapy/parsel

Parsel vous permet d'extraire des données de documents XML/HTML à l'aide de sélecteurs XPath ou CSS

scrapy
⭐ 1,368 Python 👤 scrapy Organization 🕐 Mis à jour 2026-11-12 📅 Créé 2015-04-24
59
mov-cli/mov-cli

Regardez tout depuis votre terminal.

mov-cli
⭐ 1,313 Python 👤 mov-cli Organization 🕐 Mis à jour 2025-10-05 📅 Créé 2022-03-11
60
daijro/browserforge

🎭 Générateur intelligent d'en-têtes et d'empreintes digitales de navigateur

daijro
⭐ 1,298 Python 👤 daijro User 🕐 Mis à jour 2026-10-29 📅 Créé 2024-03-13
61
plabayo/rama

cadre de services modulaire pour déplacer et transformer des paquets réseau

plabayo
⭐ 1,273 Rust 👤 plabayo Organization 🕐 Mis à jour 2026-11-21 📅 Créé 2022-08-07
62
Decodo/Decodo

Proxies résidentiels rotatifs HTTP(S)/SOCKS5 - exemples de code et informations générales.

Decodo
⭐ 1,264 Java 👤 Decodo Organization 🕐 Mis à jour 2026-11-11 📅 Créé 2019-01-07
63
neon-mmd/websurfx

:rocket: Une alternative open source à searx qui fournit un moteur de méta-recherche à l'aspect moderne :sparkles:, ultra-rapide :zap:, respectueux de la vie privée :disguised_face:, sécurisé :lock:

neon-mmd
⭐ 1,231 Rust 👤 neon-mmd User 🕐 Mis à jour 2026-11-06 📅 Créé 2023-04-28
64
datawhores/OF-Scraper

Un fork entièrement remanié et repensé, avec prise en charge d’OnlyFans et de Fansly, réinventé de zéro à partir du onlyfans-scraper original.

datawhores
⭐ 1,219 Python 👤 datawhores User 🕐 Mis à jour 2026-11-21 📅 Créé 2023-03-22
65
germondai/trawl

Moteur de scraping auto-hébergé — contourne tout défi JS et captcha : Cloudflare, Turnstile, reCAPTCHA, hCaptcha, GeeTest. Alternative à FlareSolverr et Byparr, remplacement direct pour votre pile *arr.

germondai
⭐ 1,209 TypeScript 👤 germondai User 🕐 Mis à jour 2026-11-16 📅 Créé 2026-06-26
66
AndyTheFactory/newspaper4k

📰 Newspaper4k, un fork du bien-aimé Newspaper3k. Extraction d'articles, de titres et de métadonnées à partir de sites d'information.

AndyTheFactory
⭐ 1,170 Python 👤 AndyTheFactory User 🕐 Mis à jour 2026-11-01 📅 Créé 2023-10-22
67
bellingcat/auto-archiver

Archiver automatiquement les liens vers des vidéos, des images et du contenu de médias sociaux à partir de Google Sheets (et plus encore).

bellingcat
⭐ 1,158 Python 👤 bellingcat Organization 🕐 Mis à jour 2026-11-18 📅 Créé 2021-01-15
68
soxoj/socid-extractor

⛏️ Le moteur d'extraction derrière Maigret : transformez n'importe quelle URL de profil en un enregistrement OSINT structuré sur plus de 150 sites

soxoj
⭐ 1,143 Python 👤 soxoj User 🕐 Mis à jour 2026-11-20 📅 Créé 2019-11-17
69
ai-to-ai/Auto-Gmail-Creator

Bot de Création Automatique de Gmail en Gros Open Source avec Selenium & Seleniumwire (Python). N'hésitez pas à me contacter pour Django/Flask, ML, IA, GPT, Automatisation, Scraping.

ai-to-ai
⭐ 1,138 Python 👤 ai-to-ai User 🕐 Mis à jour 2024-09-26 📅 Créé 2023-02-20
70
scrapfly/scrapfly-scrapers

Scripts Python évolutifs de scraping web pour plus de 80 domaines populaires

scrapfly
⭐ 1,133 Python 👤 scrapfly Organization 🕐 Mis à jour 2026-11-21 📅 Créé 2023-05-22
71
elixir-crawly/crawly

Crawly, un framework de haut niveau pour le web crawling et scraping pour Elixir.

elixir-crawly
⭐ 1,129 Elixir 👤 elixir-crawly Organization 🕐 Mis à jour 2026-11-20 📅 Créé 2019-03-09
72
online-judge-tools/oj

Outils pour divers juges en ligne. Téléchargement de cas d'exemple, génération de cas de test supplémentaires, test de votre code et soumission.

online-judge-tools
⭐ 1,128 Python 👤 online-judge-tools Organization 🕐 Mis à jour 2024-05-03 📅 Créé 2017-01-05
73
viu-media/viu

Votre expérience anime depuis le navigateur depuis le terminal

viu-media
⭐ 1,062 Python 👤 viu-media Organization 🕐 Mis à jour 2026-05-06 📅 Créé 2024-05-27
74
jfilter/clean-text

🧹 Paquet Python pour le nettoyage de texte

jfilter
⭐ 1,031 Python 👤 jfilter User 🕐 Mis à jour 2026-10-26 📅 Créé 2018-12-06
75
daijro/hrequests

Web scraping pour les humains

daijro
⭐ 976 Python 👤 daijro User 🕐 Mis à jour 2024-12-01 📅 Créé 2023-07-06
76
Krasjet/pdf.tocgen

Un ensemble d'outils CLI pour générer automatiquement des tables des matières pour les fichiers PDF.

Krasjet
⭐ 853 Python 👤 Krasjet User 🕐 Mis à jour 2026-05-13 📅 Créé 2020-07-28
77
leoncvlt/loconotion

📄 Outil Python pour transformer les pages Notion.so en sites web statiques légers et personnalisables

leoncvlt
⭐ 853 Python 👤 leoncvlt User 🕐 Mis à jour 2024-07-22 📅 Créé 2020-05-16
78
tiliondev/fortress

Moteur Chromium furtif qui empêche les scrapers et les agents de navigateur d’être bloqués grâce à une seule modification de ligne de code.

tiliondev
⭐ 817 Python 👤 tiliondev Organization 🕐 Mis à jour 2026-11-03 📅 Créé 2026-07-02
79
MorvanZhou/easy-scraping-tutorial

Code de tutoriel simple mais utile pour le web scraping en Python.

MorvanZhou
⭐ 814 Jupyter Notebook 👤 MorvanZhou User 🕐 Mis à jour 2024-04-07 📅 Créé 2017-12-29
80
Lookyloo/lookyloo

Lookyloo est une interface web qui permet aux utilisateurs de capturer une page de site web et d'afficher ensuite un arbre de domaines qui s'appellent les uns les autres.

Lookyloo
⭐ 790 Python 👤 Lookyloo Organization 🕐 Mis à jour 2026-11-20 📅 Créé 2017-07-23
81
alpkeskin/rota

Un moteur de rotation de proxy haute performance avec gestion automatisée des IP et surveillance en temps réel de l'état de santé

alpkeskin
⭐ 775 Go 👤 alpkeskin User 🕐 Mis à jour 2026-09-25 📅 Créé 2024-06-02
82
ZacharyHampton/HomeHarvest

Package Python pour le scraping de données immobilières

ZacharyHampton
⭐ 764 Python 👤 ZacharyHampton User 🕐 Mis à jour 2025-12-26 📅 Créé 2023-09-15
83
serpapi/google-search-results-python

Résultats de recherche Google via SERP API pip Package Python

serpapi
⭐ 762 Python 👤 serpapi Organization 🕐 Mis à jour 2026-08-18 📅 Créé 2018-01-10
84
1broseidon/ketch

CLI rapide et sans état pour effectuer des recherches et extraire du contenu sur le Web. Conçu pour les agents d’IA.

1broseidon
⭐ 756 Go 👤 1broseidon User 🕐 Mis à jour 2026-11-19 📅 Créé 2026-03-25
85
josephlimtech/linkedin-profile-scraper-api

🕵️‍♂️ Scraper de profils LinkedIn renvoyant des données de profil structurées en JSON.

josephlimtech
⭐ 725 TypeScript 👤 josephlimtech User 🕐 Mis à jour 2024-04-05 📅 Créé 2018-12-21
86
prescience-data/dark-knowledge

😈📚 Une bibliothèque organisée de documents de recherche et de présentations pour les amateurs de contre-détection et de confidentialité du web.

prescience-data
⭐ 715 JavaScript 👤 prescience-data User 🕐 Mis à jour 2024-02-19 📅 Créé 2021-04-15
87
Yuvi9587/Kemono-Downloader

Kemono pawchive Downloader est une application rapide basée sur PyQt5 pour archiver du contenu provenant d'un large éventail de sites, notamment Kemono, Coomer, Bunkr, Erome, Saint2.su, nhentai et Discord. Elle dispose d'un navigateur de créateurs, d'un vérificateur de mises à jour et prend en charge les téléchargements multi-thread et multi-parties. Les sessions peuvent être mises en pause, reprises ou récupérer des filtres.

Yuvi9587
⭐ 675 Python 👤 Yuvi9587 User 🕐 Mis à jour 2026-11-12 📅 Créé 2025-05-05
88
ScriptSmith/socialreaper

Bibliothèque de scraping/collecte de données sur les réseaux sociaux pour les API de Facebook, Twitter, Reddit, YouTube, Pinterest et Tumblr

ScriptSmith
⭐ 668 Python 👤 ScriptSmith User 🕐 Mis à jour 2026-09-29 📅 Créé 2017-01-31
89
Xonshiz/comic-dl

Comic-dl est un outil en ligne de commande pour télécharger des mangas et des comics à partir de divers sites de comics et de mangas. Sites pris en charge : readcomiconline.to, mangafox.me, comic naver et bien d'autres.

Xonshiz
⭐ 667 Python 👤 Xonshiz User 🕐 Mis à jour 2025-07-31 📅 Créé 2016-11-13
90
freelawproject/juriscraper

Une API pour extraire des métadonnées des sites web des tribunaux américains.

freelawproject
⭐ 664 HTML 👤 freelawproject Organization 🕐 Mis à jour 2026-11-21 📅 Créé 2014-08-08
91
AnonCatalyst/Ominis-OSINT

Cette application Python est un outil d'OSINT (Open Source Intelligence) appelé "Ominis OSINT - Web Hunter". Elle effectue une collecte d'informations en ligne en interrogeant Google pour obtenir des résultats de recherche liés à une requête saisie par l'utilisateur. L'outil extrait les informations pertinentes telles que les titres, les URL et les mentions potentielles de la requête dans les résultats.

AnonCatalyst
⭐ 655 Python 👤 AnonCatalyst User 🕐 Mis à jour 2026-11-17 📅 Créé 2023-10-09
92
gunkonchi/xscrape

Client Python asynchrone pour collecter les données publiques de X (Twitter) : recherches, profils, fils de discussion, réponses et médias. Il intègre la rotation des comptes, une limitation adaptative du débit et l’exportation vers JSON/CSV/SQLite.

gunkonchi
⭐ 647 Python 👤 gunkonchi User 🕐 Mis à jour 2026-10-20 📅 Créé 2026-09-26
93
lorey/social-media-profiles-regexs

:card_index: Extrayez les profils des réseaux sociaux et plus encore avec des expressions régulières

lorey
⭐ 642 Python 👤 lorey User 🕐 Mis à jour 2024-01-11 📅 Créé 2015-06-24
94
scrapfly/Antibot-Detector

Détection en temps réel des systèmes anti-bots, des captchas et des techniques de fingerprinting. Identifie Cloudflare, Akamai, DataDome, reCAPTCHA, hCaptcha, Shape Security et bien d’autres, avec un score de confiance et des outils de capture avancés.

scrapfly
⭐ 636 JavaScript 👤 scrapfly Organization 🕐 Mis à jour 2026-11-17 📅 Créé 2025-09-03
95
l4rm4nd/LinkedInDumper

Script Python 3 pour décharger/extraire/extraire les employés d'une entreprise de l'API LinkedIn

l4rm4nd
⭐ 624 Python 👤 l4rm4nd User 🕐 Mis à jour 2026-08-21 📅 Créé 2022-10-17
96
ksanjeev284/reddit-universal-scraper

Universal Reddit Scraper - Fonctionne sur n'importe quel Subreddit ou utilisateur

ksanjeev284
⭐ 620 Python 👤 ksanjeev284 User 🕐 Mis à jour 2026-10-22 📅 Créé 2025-12-13
97
umihico/docker-selenium-lambda

La démo la plus simple d'automatisation de Chrome par Python et Selenium dans AWS Lambda

umihico
⭐ 614 Dockerfile 👤 umihico User 🕐 Mis à jour 2026-11-12 📅 Créé 2021-03-12
98
kr4ude/onlyfans-scraper

Un outil qui vous permet d'extraire des médias de n'importe quel compte Onlyfans et plus encore

kr4ude
⭐ 605 Python 👤 kr4ude User 🕐 Mis à jour 2025-11-25 📅 Créé 2025-11-10
99
drudge/n8n-nodes-puppeteer

Nœud n8n pour l'automatisation du navigateur avec Puppeteer

drudge
⭐ 589 TypeScript 👤 drudge User 🕐 Mis à jour 2026-05-08 📅 Créé 2022-05-07
100
spekulatius/PHPScraper

Un utilitaire web universel pour PHP.

spekulatius
⭐ 588 PHP 👤 spekulatius User 🕐 Mis à jour 2026-09-08 📅 Créé 2020-04-21