Git Stars Git Stars

#web-scraper Repositories

Entdecke 36 aktive Open-Source-GitHub-Repositories, die mit #web-scraper getaggt sind und insgesamt 565,282 Sterne gesammelt haben (durchschnittlich 15,702 Sterne pro Projekt). Spitzenreiter in diesem Themenbereich ist firecrawl/firecrawl mit 205,758 Sternen.

36
Gesamtzahl der Repositories
565,282
Gesamtanzahl der Sterne
15,702
Durchschnittliche Sterne/Repo

Insgesamt 36 Repositories

1
firecrawl/firecrawl

Wissensinfrastruktur, die Ihre Agenten intelligenter macht. Durchsuchen, extrahieren und greifen Sie über eine einzige API auf mehr als 550 Datenanbieter zu.

firecrawl
⭐ 205,758 TypeScript 👤 firecrawl Organization 🕐 Aktualisiert 2026-11-21 📅 Erstellt 2024-04-15
2
Panniantong/Agent-Reach

Geben Sie Ihrem KI-Agenten die Augen, um das gesamte Internet zu sehen. Lesen & durchsuchen Sie Twitter, Reddit, YouTube, GitHub, Bilibili, XiaoHongShu – ein CLI, keine API-Gebühren.

Panniantong
⭐ 113,683 Python 👤 Panniantong User 🕐 Aktualisiert 2026-11-08 📅 Erstellt 2026-02-24
3
D4Vinci/Scrapling

🕷️ Das BESTE Web-Scraping-Framework – für alles von einer einzelnen Anfrage bis hin zu einem umfangreichen Crawl! Nur keine Scheu: Tritt hier bei: https://discord.gg/EMgGbDceNQ und folge uns hier für tägliche Tipps und Tricks: https://x.com/Scrapling_dev

D4Vinci
⭐ 104,760 Python 👤 D4Vinci User 🕐 Aktualisiert 2026-11-17 📅 Erstellt 2024-10-13
4
ScrapeGraphAI/Scrapegraph-ai

Python-Scraper basierend auf KI

ScrapeGraphAI
⭐ 32,877 Python 👤 ScrapeGraphAI Organization 🕐 Aktualisiert 2026-10-06 📅 Erstellt 2024-01-27
5
lexmount/moli

Der beste Headless-Browser für KI-Agenten. Leichtgewichtig, schnell und hochkompatibel. In Rust entwickelt

lexmount
⭐ 24,190 Rust 👤 lexmount Organization 🕐 Aktualisiert 2026-11-21 📅 Erstellt 2026-08-10
6
getmaxun/maxun

Verwandeln Sie jede Website in eine strukturierte API. Extrahieren, automatisieren, durchsuchen und überwachen Sie das Web.

getmaxun
⭐ 18,538 TypeScript 👤 getmaxun Organization 🕐 Aktualisiert 2026-11-20 📅 Erstellt 2023-10-23
7
gosom/google-maps-scraper

Daten von Google Maps scrapen. Extrahiert Daten wie Name, Adresse, Telefonnummer, Website-URL, Bewertung, Anzahl der Bewertungen, Breiten- und Längengrad, Bewertungen, E-Mail und mehr für jeden Ort

gosom
⭐ 8,291 Go 👤 gosom User 🕐 Aktualisiert 2026-11-21 📅 Erstellt 2023-04-22
8
BruceDone/awesome-crawler

Eine Sammlung toller Web-Crawler und Spiders in verschiedenen Sprachen

BruceDone
⭐ 7,051 👤 BruceDone User 🕐 Aktualisiert 2024-06-16 📅 Erstellt 2016-10-10
9
jaypyles/Scraperr

Selbst gehosteter Web-Scraper.

jaypyles
⭐ 4,876 TypeScript 👤 jaypyles User 🕐 Aktualisiert 2025-10-12 📅 Erstellt 2024-07-06
10
AhmadHassan-BTed/JinaClip

Browser-Erweiterung in Profiqualität mit lokalem Ansatz, die jede Webseite vollständig in der Laufzeitumgebung des Browsers in originalgetreues, LLM-freundliches Markdown umwandelt. Ohne Cloud, datenschutzorientiert und speziell für KI-Workflows entwickelt.

AhmadHassan-BTed
⭐ 4,160 JavaScript 👤 AhmadHassan-BTed User 🕐 Aktualisiert 2026-11-09 📅 Erstellt 2026-05-16
11
oxylabs/google-ai-mode-scraper

Scrapen Sie Google AI Mode-Antworten im großen Stil ohne Sperren.

oxylabs
⭐ 3,619 Java 👤 oxylabs Organization 🕐 Aktualisiert 2026-11-18 📅 Erstellt 2025-09-08
12
arpit-omprakash/100ProjectsOfCode

Eine Liste praktischer Wissensaufbauprojekte.

arpit-omprakash
⭐ 3,548 👤 arpit-omprakash User 🕐 Aktualisiert 2024-04-12 📅 Erstellt 2020-10-05
13
itsOwen/CyberScraper-2077

Ein leistungsstarker Web-Scraper, angetrieben von LLMs | OpenAI, Gemini & Ollama

itsOwen
⭐ 3,302 Python 👤 itsOwen User 🕐 Aktualisiert 2026-10-12 📅 Erstellt 2024-08-17
14
php-curl-class/php-curl-class

PHP Curl Class erleichtert das Senden von HTTP-Anfragen und die Integration mit Web-APIs.

php-curl-class
⭐ 3,293 PHP 👤 php-curl-class Organization 🕐 Aktualisiert 2026-11-17 📅 Erstellt 2013-08-16
15
oxylabs/how-to-scrape-amazon-product-data

Der Prozess der Extraktion von Produktdaten von Amazon mithilfe von Python, einschließlich Titeln, Bewertungen, Preisen, Bildern und Beschreibungen.

oxylabs
⭐ 3,248 Python 👤 oxylabs Organization 🕐 Aktualisiert 2026-11-18 📅 Erstellt 2024-09-03
16
spider-rs/spider

Grundlegende Webdatenerfassung mit geringer Latenz in Rust

spider-rs
⭐ 2,856 Rust 👤 spider-rs Organization 🕐 Aktualisiert 2026-11-20 📅 Erstellt 2018-01-07
17
lncrawl/lightnovel-crawler

Generieren und laden Sie E-Books aus Online-Quellen herunter.

lncrawl
⭐ 2,717 Python 👤 lncrawl Organization 🕐 Aktualisiert 2026-11-11 📅 Erstellt 2018-01-17
18
anaskhan96/soup

Web-Scraper in Go, ähnlich wie BeautifulSoup

anaskhan96
⭐ 2,302 Go 👤 anaskhan96 User 🕐 Aktualisiert 2026-10-24 📅 Erstellt 2017-02-23
19
oxylabs/how-to-scrape-google-scholar

Ein Leitfaden zum Extrahieren von Titeln, Autoren und Zitaten aus Google Scholar mit Python und der Oxylabs SERP Scraper API.

oxylabs
⭐ 2,095 Python 👤 oxylabs Organization 🕐 Aktualisiert 2026-11-18 📅 Erstellt 2024-03-07
20
oxylabs/how-to-scrape-amazon-prices

Ein Code zum Extrahieren von Bestseller-Artikeln, Suchergebnissen und aktuell verfügbaren Angeboten von Amazon mithilfe von Python und der Oxylabs E-Commerce Scraper API.

oxylabs
⭐ 2,083 Python 👤 oxylabs Organization 🕐 Aktualisiert 2026-11-18 📅 Erstellt 2024-03-21
21
gildas-lormeau/single-file-cli

CLI-Werkzeug zum Speichern einer originalgetreuen Kopie einer vollständigen Webseite in einer einzigen HTML-Datei (basierend auf SingleFile)

gildas-lormeau
⭐ 1,702 JavaScript 👤 gildas-lormeau User 🕐 Aktualisiert 2026-11-18 📅 Erstellt 2022-05-31
22
fastcrw/crw

Schnelle, leichtgewichtige Firecrawl/Tavily-Alternative in Rust. Web-Scraper, Crawler & Such-API mit MCP-Server für KI-Agenten. Drop-in Firecrawl-kompatible API (/scrape, /crawl, /search). 2,3x schneller als Tavily, 1,5x schneller als Firecrawl bei 1K-URL-Benchmarks. 6 MB RAM, einzelne Binärdatei. Selbst-Hosting oder Managed Cloud.

fastcrw
⭐ 1,284 Rust 👤 fastcrw Organization 🕐 Aktualisiert 2026-11-21 📅 Erstellt 2026-03-02
23
dondai44423/donsetch

Web-Abruf, Suche und Crawling für KI-Agenten. Von Grund auf in Rust entwickelt. Keine Schlüssel, keine Konten. AGPL v3.

dondai44423
⭐ 1,138 Rust 👤 dondai44423 User 🕐 Aktualisiert 2026-11-21 📅 Erstellt 2026-08-07
24
juancarlospaco/faster-than-requests

Schnellere Anfragen mit Python 3

juancarlospaco
⭐ 1,131 Nim 👤 juancarlospaco User 🕐 Aktualisiert 2026-11-19 📅 Erstellt 2018-11-13
25
0x676e67/wreq

Ein ergonomischer, datenschutzbewusster Rust-HTTP-Client

0x676e67
⭐ 1,118 Rust 👤 0x676e67 User 🕐 Aktualisiert 2026-11-20 📅 Erstellt 2024-09-19
26
oxylabs/ai-scraper-py

AI Scraper ist ein leistungsstarkes Scraping-Tool und ein Scraping-Agent, das für die Automatisierung der Datenextraktion mit unübertroffener Präzision entwickelt wurde. Ideal für skalierbare AI-Scraping-Aufgaben über diverse Webquellen hinweg, vereinfacht dieses Tool komplexe Scraping-Operationen zu effizienten, intelligenten Workflows.

oxylabs
⭐ 1,089 👤 oxylabs Organization 🕐 Aktualisiert 2026-04-02 📅 Erstellt 2025-09-25
27
postmodern/spidr

Eine vielseitige Ruby-Web-Spidering-Bibliothek, die eine Site, mehrere Domains, bestimmte Links oder unendlich spidern kann. Spidr ist für Schnelligkeit und Benutzerfreundlichkeit konzipiert.

postmodern
⭐ 835 Ruby 👤 postmodern User 🕐 Aktualisiert 2026-01-12 📅 Erstellt 2009-03-08
28
cassidoo/scrapers

Eine Liste von Scrapern aus dem gesamten Web.

cassidoo
⭐ 723 👤 cassidoo User 🕐 Aktualisiert 2025-02-07 📅 Erstellt 2016-04-18
29
lumpinif/deepcrawl

100% kostenlos und vollständig open-source Alternative zu Firecrawl edge mit besserer Link-Extraktion für Agents - die du selbst auf Cloudflare oder Vercel deployen kannst.

lumpinif
⭐ 704 TypeScript 👤 lumpinif User 🕐 Aktualisiert 2026-08-24 📅 Erstellt 2025-05-22
30
shaikhsajid1111/social-media-profile-scrapers

Benutzerdaten über soziale Medien abrufen

shaikhsajid1111
⭐ 588 Python 👤 shaikhsajid1111 User 🕐 Aktualisiert 2026-09-15 📅 Erstellt 2020-04-26
31
spekulatius/PHPScraper

Ein universelles Web-Util für PHP.

spekulatius
⭐ 588 PHP 👤 spekulatius User 🕐 Aktualisiert 2026-09-08 📅 Erstellt 2020-04-21
32
jaebradley/basketball_reference_web_scraper

NBA Stats API über Basketball Reference

jaebradley
⭐ 563 HTML 👤 jaebradley User 🕐 Aktualisiert 2026-11-21 📅 Erstellt 2015-10-23
33
oxylabs/oxylabs-ai-studio-openclaw

Offizielles Oxylabs AI-Studio Openclaw-Plugin

oxylabs
⭐ 549 TypeScript 👤 oxylabs Organization 🕐 Aktualisiert 2026-09-16 📅 Erstellt 2026-02-26
34
oxylabs/quick-start-guide

Schnellstartanleitungen für Python, um das Beste aus dem kostenlosen Testangebot der Oxylabs Web Scraper API herauszuholen.

oxylabs
⭐ 512 👤 oxylabs Organization 🕐 Aktualisiert 2026-06-19 📅 Erstellt 2022-03-14
35
AlexMathew/scrapple

Ein Framework zur Erstellung semi-automatischer Web-Content-Extraktoren

AlexMathew
⭐ 506 Python 👤 AlexMathew User 🕐 Aktualisiert 2026-01-16 📅 Erstellt 2014-12-13
36
oxylabs/web-scraper-api

All-in-one-Web-Scraping-API für die Datenerfassung in Echtzeit und großem Umfang – Proxys, CAPTCHA-Verwaltung, JavaScript-Rendering und Parsing in einer einzigen Anfrage mit HTML oder strukturiertem JSON als Ergebnis.

oxylabs
⭐ 503 👤 oxylabs Organization 🕐 Aktualisiert 2026-10-01 📅 Erstellt 2026-06-05

Häufig gestellte Fragen

1

Welches ist das beliebteste #web-scraper-Repository auf GitHub?

Das am höchsten eingestufte Open-Source-#web-scraper-Projekt auf GitHub ist firecrawl/firecrawl mit 205,758 Sternen. Wissensinfrastruktur, die Ihre Agenten intelligenter macht. Durchsuchen, extrahieren und greifen Sie über eine einzige API auf mehr als 550 Datenanbieter zu.

2

Welche Programmiersprachen werden in #web-scraper-Repositories am häufigsten verwendet?

Unter den am höchsten eingestuften #web-scraper-Projekten auf GitHub sind Python, TypeScript, Rust, Go die am häufigsten verwendeten Programmiersprachen.

3

Wie wird das Ranking der #web-scraper-Repositories berechnet?

Wir verfolgen 36 aktive Open-Source-Repositories, die mit #web-scraper getaggt sind (500+ Sterne), mit insgesamt 565,282 Sternen und durchschnittlich 15,702 Sternen pro Repository. Die Rankings werden täglich über die GitHub-API aktualisiert.