Git Stars Git Stars

#web-scraping Dépôts

381
Total des Dépôts
2.1M
Nombre total d'étoiles
5,636
Moyenne d'Étoiles/Dépôt
301
z0m31en7/Uscrapper

Uscrapper Vanta : Plongez plus profondément dans le web avec cet outil open-source puissant. Extrayez des informations précieuses avec facilité et efficacité, à partir de sources du web de surface et du deep web. Renforcez votre exploration et votre analyse de données grâce aux capacités avancées de Vanta. Rapide, fiable et convivial, Uscrapper Vanta est le choix ultime pour les chercheurs et les analystes.

z0m31en7
⭐ 740 Python 👤 z0m31en7 User 🕐 Mis à jour 2024-11-24 📅 Créé 2023-05-31
302
djadmin/medium-cli

Medium pour les Hackers - :computer: Un CLI pour les Histoires Medium.

djadmin
⭐ 735 JavaScript 👤 djadmin User 🕐 Mis à jour 2026-02-13 📅 Créé 2016-01-21
303
drawrowfly/amazon-product-api

Amazon Scraper. Récupérez des produits des résultats de recherche Amazon ou des avis d'un produit spécifique

drawrowfly
⭐ 734 JavaScript 👤 drawrowfly User 🕐 Mis à jour 2024-07-05 📅 Créé 2019-10-06
304
ScrapeGraphAI/scrapecraft

Éditeur de web scraping optimisé par l'IA avec constructeur de flux de travail visuel. Créez, testez et déployez des scrapers Web en utilisant le langage naturel. Propulsé par ScrapeGraphAI et LangGraph.

ScrapeGraphAI
⭐ 731 Python 👤 ScrapeGraphAI Organization 🕐 Mis à jour 2025-12-26 📅 Créé 2025-07-01
305
rubycdp/vessel

Framework Ruby rapide de haut niveau pour le web crawling

rubycdp
⭐ 725 Ruby 👤 rubycdp Organization 🕐 Mis à jour 2026-11-03 📅 Créé 2019-09-17
306
MorganZhang100/zhihu-spider

Un web spider pour zhihu.com

MorganZhang100
⭐ 725 Python 👤 MorganZhang100 User 🕐 Mis à jour 2024-01-17 📅 Créé 2015-02-22
307
lzjun567/python_scripts

Quelques codes de démonstration liés à Python

lzjun567
⭐ 715 HTML 👤 lzjun567 User 🕐 Mis à jour 2024-07-21 📅 Créé 2017-02-07
308
lhccong/fish-island-backend

Moyu Island 🎣 Backend Basé sur le Web Scraping ➕ Netty ➕ SpringBoot ➕Redis➕ MySQL Open Source 🌟 Site Web Moyu Tout-en-Un

lhccong
⭐ 710 Java 👤 lhccong User 🕐 Mis à jour 2026-11-18 📅 Créé 2025-02-20
309
kovidgoyal/html5-parser

Analyse rapide de HTML 5 basée sur C pour Python

kovidgoyal
⭐ 710 C 👤 kovidgoyal User 🕐 Mis à jour 2026-09-20 📅 Créé 2017-06-03
310
lumpinif/deepcrawl

100 % gratuit et alternative open-source complète à Firecrawl edge avec une extraction de liens meilleure pour les agents - que vous pouvez déployer vous-même sur Cloudflare ou Vercel.

lumpinif
⭐ 704 TypeScript 👤 lumpinif User 🕐 Mis à jour 2026-08-24 📅 Créé 2025-05-22
311
maaaaz/webscreenshot

Un script simple pour faire des captures d'écran d'une liste de sites web

maaaaz
⭐ 696 Python 👤 maaaaz User 🕐 Mis à jour 2025-10-19 📅 Créé 2014-01-12
312
only-cli/oc

Transformez n’importe quel site web en une CLI compacte conçue pour les agents d’IA. Parcourez le web avec des centaines de tokens, et non des dizaines de milliers.

only-cli
⭐ 694 JavaScript 👤 only-cli User 🕐 Mis à jour 2026-11-17 📅 Créé 2026-08-18
313
firecrawl/cli

CLI et compétences d’agent Firecrawl : recherchez, extrayez du contenu et interagissez avec le Web depuis votre terminal ou n’importe quel agent de programmation. Vous pouvez également analyser, explorer et cartographier des sites, ainsi qu’utiliser Agent et Monitor. Firecrawl est l’API de contexte pour les agents IA.

firecrawl
⭐ 694 TypeScript 👤 firecrawl Organization 🕐 Mis à jour 2026-11-19 📅 Créé 2026-01-07
314
karpathy/hn-time-capsule

Analyse rétrospective, à l'aide de LLM, des discussions sur Hacker News datant d'il y a dix ans

karpathy
⭐ 693 Python 👤 karpathy User 🕐 Mis à jour 2025-12-10 📅 Créé 2025-12-10
315
xiaosimao/IP_POOL

Pool de proxies IP gratuit

xiaosimao
⭐ 686 Python 👤 xiaosimao User 🕐 Mis à jour 2025-09-15 📅 Créé 2017-09-22
316
perkeep/gphotos-cdp

Ce programme utilise le protocole Chrome DevTools pour piloter une session Chrome qui télécharge vos photos stockées dans Google Photos.

perkeep
⭐ 683 Go 👤 perkeep Organization 🕐 Mis à jour 2024-06-30 📅 Créé 2019-08-08
317
yixiu001/Free-SS-NODES

Obtenir des nœuds SS gratuits

yixiu001
⭐ 681 👤 yixiu001 User 🕐 Mis à jour 2024-11-11 📅 Créé 2024-11-11
318
everyinfra/everyinfra-agent-plugins

Serveur MCP et extension pour agents EveryInfra : API de scraping pour TikTok, Instagram, Amazon, YouTube, Xiaohongshu et Douyin. 612 API de données sur 106 plateformes, à partir de 0,56 $ pour 1 000 appels. Pour Claude Code, Cursor et Codex.

everyinfra
⭐ 672 Python 👤 everyinfra Organization 🕐 Mis à jour 2026-11-21 📅 Créé 2026-09-01
319
firecrawl/open-researcher

🔥 Assistant de recherche visuel IA qui affiche la pensée en temps réel, fournit une analyse à vue fractionnée et des citations automatiques grâce à Claude et Firecrawl

firecrawl
⭐ 667 TypeScript 👤 firecrawl Organization 🕐 Mis à jour 2025-07-02 📅 Créé 2025-06-27
320
wimglenn/advent-of-code-data

Obtenez vos données Advent of Code avec une seule instruction d'importation

wimglenn
⭐ 666 Python 👤 wimglenn User 🕐 Mis à jour 2026-08-01 📅 Créé 2016-12-03
321
oxylabs/Agent-browser

Exécutez des scripts d'automatisation complexes via des sessions cloud distantes, intégrant des proxys résidentiels, la résolution automatique de CAPTCHA et le rendu JavaScript natif pour les sites web dynamiques les plus exigeants.

oxylabs
⭐ 663 👤 oxylabs Organization 🕐 Mis à jour 2026-11-18 📅 Créé 2026-04-17
322
adamschwartz/web.scraper.workers.dev

Extraire du texte des sites web par sélecteur CSS.

adamschwartz
⭐ 658 JavaScript 👤 adamschwartz User 🕐 Mis à jour 2024-02-14 📅 Créé 2019-10-10
323
asmcos/requests

Une bibliothèque cliente HTTP en Golang. Salut à python requests.

asmcos
⭐ 656 Go 👤 asmcos User 🕐 Mis à jour 2026-10-09 📅 Créé 2018-08-27
324
yanzhou/CnkiSpider

Crawler de la China National Knowledge Infrastructure

yanzhou
⭐ 653 Python 👤 yanzhou User 🕐 Mis à jour 2025-03-08 📅 Créé 2014-11-05
325
11firefly11/fir-proxy

Un programme de pool de proxy graphique avec des proxys rotatifs

11firefly11
⭐ 650 Python 👤 11firefly11 User 🕐 Mis à jour 2025-12-04 📅 Créé 2025-07-22
326
KNKPA/KNKPAnime

KNKPAnime : Un logiciel pour regarder des anime prenant en charge plusieurs sources d'épisodes et les commentaires.

KNKPA
⭐ 648 Dart 👤 KNKPA Organization 🕐 Mis à jour 2025-02-01 📅 Créé 2024-04-20
327
Threezh1/SiteCopy

sitecopy est un outil qui facilite la sauvegarde de sites web personnels et la collecte de données réseau

Threezh1
⭐ 647 Python 👤 Threezh1 User 🕐 Mis à jour 2024-01-21 📅 Créé 2019-12-12
328
ScrapingBee/google-hotels-api

Automatisez le scraping des données d'hôtels, notamment les prix, les disponibilités, les notes et les fournisseurs de réservation, grâce à une intégration de l'API Google Hotels.

ScrapingBee
⭐ 645 👤 ScrapingBee Organization 🕐 Mis à jour 2026-04-08 📅 Créé 2026-04-08
⭐ 640 CSS 👤 dreamsofcode-io Organization 🕐 Mis à jour 2024-08-04 📅 Créé 2024-07-26
330
cfinke/EpsteOut

Découvrez lesquels de vos contacts LinkedIn figurent dans les dossiers Epstein.

cfinke
⭐ 638 Python 👤 cfinke User 🕐 Mis à jour 2026-10-17 📅 Créé 2026-02-04
331
lzjqsdd/NewsSpider

Récupérer les actualités de Toutiao, NetEase, Tencent, etc., et créer un moteur de recherche simple

lzjqsdd
⭐ 638 Python 👤 lzjqsdd User 🕐 Mis à jour 2024-05-14 📅 Créé 2016-04-19
332
scrapfly/Antibot-Detector

Détection en temps réel des systèmes anti-bots, des captchas et des techniques de fingerprinting. Identifie Cloudflare, Akamai, DataDome, reCAPTCHA, hCaptcha, Shape Security et bien d’autres, avec un score de confiance et des outils de capture avancés.

scrapfly
⭐ 636 JavaScript 👤 scrapfly Organization 🕐 Mis à jour 2026-11-17 📅 Créé 2025-09-03
333
ohyicong/Google-Image-Scraper

Une bibliothèque pour scrap Google Images

ohyicong
⭐ 636 Python 👤 ohyicong User 🕐 Mis à jour 2025-02-16 📅 Créé 2020-07-18
335
deedy5/primp

Client HTTP capable d'imiter les navigateurs web

deedy5
⭐ 634 Rust 👤 deedy5 User 🕐 Mis à jour 2026-09-13 📅 Créé 2024-04-12
336
achuthasubhash/Complete-Life-Cycle-of-a-Data-Science-Project

Cycle de vie complet d'un projet de science des données

achuthasubhash
⭐ 631 👤 achuthasubhash User 🕐 Mis à jour 2024-06-07 📅 Créé 2020-09-02
337
eliemichel/LilySurfaceScraper

Importer des shaders et des environnements dans Blender depuis une seule URL

eliemichel
⭐ 625 Cython 👤 eliemichel User 🕐 Mis à jour 2026-06-19 📅 Créé 2019-04-28
338
super-l/superl-url

Un programme qui collecte le contenu des URL dans les résultats de recherche des moteurs de recherche en fonction des mots-clés. Il peut collecter automatiquement les adresses réelles et les titres des sites web connexes à partir de plusieurs moteurs de recherche, les sauvegarder dans des fichiers et supprimer automatiquement les URL en double. De plus, il permet d'ignorer personnalisément plusieurs domaines.

super-l
⭐ 621 Python 👤 super-l User 🕐 Mis à jour 2025-04-12 📅 Créé 2017-08-03
339
Lofter1/anyflip-downloader

Téléchargez les livres anyflip au format PDF

Lofter1
⭐ 619 Go 👤 Lofter1 User 🕐 Mis à jour 2026-11-16 📅 Créé 2023-02-05
340
chenluda/zhihu-download

Convertir les articles de colonne Zhihu en fichiers Markdown et les enregistrer localement

chenluda
⭐ 613 Python 👤 chenluda User 🕐 Mis à jour 2025-03-21 📅 Créé 2023-05-12
341
liuda30201/AI-Coding

Guide des avantages pour la programmation par IA : un répertoire de services relais et de sites communautaires pour Claude Code, Codex et Cursor. Il recense les quotas gratuits, les bonus d’inscription, les activités de connexion quotidienne et les avis, et propose un tableau de bord visuel ainsi que des outils de collecte de données en Python.

liuda30201
⭐ 611 HTML 👤 liuda30201 User 🕐 Mis à jour 2026-11-21 📅 Créé 2026-10-15
342
alchaincyf/huashu-chrome

Permettez à n’importe quel agent d’IA de contrôler votre propre Chrome, avec toutes vos sessions connectées. MCP + extension Chrome, compatible avec Claude Code / Codex / Cursor / Gemini CLI.

alchaincyf
⭐ 609 JavaScript 👤 alchaincyf User 🕐 Mis à jour 2026-11-15 📅 Créé 2026-08-26
343
testusyd/douyin_downloader

Machine à gacha de sac porte-bonheur Douyin, outil de capture de sac porte-bonheur Douyin, écrit par moi-même en VC++ pendant mon temps libre, avec d'autres petites fonctions, téléchargeur de vidéos Douyin sans filigrane, téléchargeur d'enregistrements de flux en direct Douyin, outil de désabonnement en masse Douyin

testusyd
⭐ 605 👤 testusyd User 🕐 Mis à jour 2026-03-08 📅 Créé 2025-05-22
344
ThinkerWen/TicketMonitoring

Orge, Cat's Eye, Île de Fenwan, Ticket Planet, Surveillance des billets de concert de retour

ThinkerWen
⭐ 605 Python 👤 ThinkerWen User 🕐 Mis à jour 2025-01-24 📅 Créé 2023-10-22
345
lunnar211/HackFacebokpass

Piratage de Facebook avec Termux. Cet outil est codé par TecnicalDipesh. Vous pouvez extraire n'importe quel ID et mot de passe Facebook.

lunnar211
⭐ 603 Python 👤 lunnar211 User 🕐 Mis à jour 2026-03-26 📅 Créé 2019-11-11
346
web-agent-master/google-search

Un outil Node.js basé sur Playwright qui contourne les mécanismes anti-scraping des moteurs de recherche pour effectuer des recherches Google. Alternative locale aux API SERP avec intégration de serveur MCP.

web-agent-master
⭐ 598 TypeScript 👤 web-agent-master Organization 🕐 Mis à jour 2025-04-06 📅 Créé 2025-03-04
347
jiuzhi-1/meituan-shenquan

Meituan Coupons Quotidiens Activité Régionale Script d'Automatisation

jiuzhi-1
⭐ 595 Python 👤 jiuzhi-1 User 🕐 Mis à jour 2024-05-08 📅 Créé 2021-10-15
348
ytdl-org/ytdl-nightly

Versions nocturnes pour youtube-dl.

ytdl-org
⭐ 593 Python 👤 ytdl-org Organization 🕐 Mis à jour 2026-11-06 📅 Créé 2023-07-02
349
shaikhsajid1111/social-media-profile-scrapers

Récupérer les données de l'utilisateur sur les réseaux sociaux

shaikhsajid1111
⭐ 588 Python 👤 shaikhsajid1111 User 🕐 Mis à jour 2026-09-15 📅 Créé 2020-04-26
350
spekulatius/PHPScraper

Un utilitaire web universel pour PHP.

spekulatius
⭐ 588 PHP 👤 spekulatius User 🕐 Mis à jour 2026-09-08 📅 Créé 2020-04-21