#web-scraper Repositories
Entdecke 36 aktive Open-Source-GitHub-Repositories, die mit #web-scraper getaggt sind und insgesamt 565,282 Sterne gesammelt haben (durchschnittlich 15,702 Sterne pro Projekt). Spitzenreiter in diesem Themenbereich ist firecrawl/firecrawl mit 205,758 Sternen.
Insgesamt 36 Repositories
Wissensinfrastruktur, die Ihre Agenten intelligenter macht. Durchsuchen, extrahieren und greifen Sie über eine einzige API auf mehr als 550 Datenanbieter zu.
Geben Sie Ihrem KI-Agenten die Augen, um das gesamte Internet zu sehen. Lesen & durchsuchen Sie Twitter, Reddit, YouTube, GitHub, Bilibili, XiaoHongShu – ein CLI, keine API-Gebühren.
🕷️ Das BESTE Web-Scraping-Framework – für alles von einer einzelnen Anfrage bis hin zu einem umfangreichen Crawl! Nur keine Scheu: Tritt hier bei: https://discord.gg/EMgGbDceNQ und folge uns hier für tägliche Tipps und Tricks: https://x.com/Scrapling_dev
Der beste Headless-Browser für KI-Agenten. Leichtgewichtig, schnell und hochkompatibel. In Rust entwickelt
Verwandeln Sie jede Website in eine strukturierte API. Extrahieren, automatisieren, durchsuchen und überwachen Sie das Web.
Daten von Google Maps scrapen. Extrahiert Daten wie Name, Adresse, Telefonnummer, Website-URL, Bewertung, Anzahl der Bewertungen, Breiten- und Längengrad, Bewertungen, E-Mail und mehr für jeden Ort
Browser-Erweiterung in Profiqualität mit lokalem Ansatz, die jede Webseite vollständig in der Laufzeitumgebung des Browsers in originalgetreues, LLM-freundliches Markdown umwandelt. Ohne Cloud, datenschutzorientiert und speziell für KI-Workflows entwickelt.
Ein leistungsstarker Web-Scraper, angetrieben von LLMs | OpenAI, Gemini & Ollama
PHP Curl Class erleichtert das Senden von HTTP-Anfragen und die Integration mit Web-APIs.
Der Prozess der Extraktion von Produktdaten von Amazon mithilfe von Python, einschließlich Titeln, Bewertungen, Preisen, Bildern und Beschreibungen.
Ein Leitfaden zum Extrahieren von Titeln, Autoren und Zitaten aus Google Scholar mit Python und der Oxylabs SERP Scraper API.
Ein Code zum Extrahieren von Bestseller-Artikeln, Suchergebnissen und aktuell verfügbaren Angeboten von Amazon mithilfe von Python und der Oxylabs E-Commerce Scraper API.
CLI-Werkzeug zum Speichern einer originalgetreuen Kopie einer vollständigen Webseite in einer einzigen HTML-Datei (basierend auf SingleFile)
Schnelle, leichtgewichtige Firecrawl/Tavily-Alternative in Rust. Web-Scraper, Crawler & Such-API mit MCP-Server für KI-Agenten. Drop-in Firecrawl-kompatible API (/scrape, /crawl, /search). 2,3x schneller als Tavily, 1,5x schneller als Firecrawl bei 1K-URL-Benchmarks. 6 MB RAM, einzelne Binärdatei. Selbst-Hosting oder Managed Cloud.
Web-Abruf, Suche und Crawling für KI-Agenten. Von Grund auf in Rust entwickelt. Keine Schlüssel, keine Konten. AGPL v3.
AI Scraper ist ein leistungsstarkes Scraping-Tool und ein Scraping-Agent, das für die Automatisierung der Datenextraktion mit unübertroffener Präzision entwickelt wurde. Ideal für skalierbare AI-Scraping-Aufgaben über diverse Webquellen hinweg, vereinfacht dieses Tool komplexe Scraping-Operationen zu effizienten, intelligenten Workflows.
Eine vielseitige Ruby-Web-Spidering-Bibliothek, die eine Site, mehrere Domains, bestimmte Links oder unendlich spidern kann. Spidr ist für Schnelligkeit und Benutzerfreundlichkeit konzipiert.
100% kostenlos und vollständig open-source Alternative zu Firecrawl edge mit besserer Link-Extraktion für Agents - die du selbst auf Cloudflare oder Vercel deployen kannst.
Schnellstartanleitungen für Python, um das Beste aus dem kostenlosen Testangebot der Oxylabs Web Scraper API herauszuholen.
All-in-one-Web-Scraping-API für die Datenerfassung in Echtzeit und großem Umfang – Proxys, CAPTCHA-Verwaltung, JavaScript-Rendering und Parsing in einer einzigen Anfrage mit HTML oder strukturiertem JSON als Ergebnis.
Häufig gestellte Fragen
Welches ist das beliebteste #web-scraper-Repository auf GitHub?
Das am höchsten eingestufte Open-Source-#web-scraper-Projekt auf GitHub ist firecrawl/firecrawl mit 205,758 Sternen. Wissensinfrastruktur, die Ihre Agenten intelligenter macht. Durchsuchen, extrahieren und greifen Sie über eine einzige API auf mehr als 550 Datenanbieter zu.
Welche Programmiersprachen werden in #web-scraper-Repositories am häufigsten verwendet?
Unter den am höchsten eingestuften #web-scraper-Projekten auf GitHub sind Python, TypeScript, Rust, Go die am häufigsten verwendeten Programmiersprachen.
Wie wird das Ranking der #web-scraper-Repositories berechnet?
Wir verfolgen 36 aktive Open-Source-Repositories, die mit #web-scraper getaggt sind (500+ Sterne), mit insgesamt 565,282 Sternen und durchschnittlich 15,702 Sternen pro Repository. Die Rankings werden täglich über die GitHub-API aktualisiert.