#scraper Repositories
Insgesamt 128 Repositories
Python-Binding für Modest- und Lexbor-Engines. Schneller HTML5-Parser mit CSS-Selektoren für Python.
Eine moderne Suchmaschinen-API für Anime, Filme/TV-Serien, Bücher, Light Novels, Manga usw.
Vollständig kostenloser und quelloffener, menschenähnlicher Instagram-Bot. Angetrieben von UIAutomator2 und kompatibel mit praktisch jedem Android-Gerät ab 5.0+, das Instagram ausführen kann – real oder emuliert.
Automatisches Umbenennungstool für Serien/Anime, Massenumbenennung mit einem Klick. Kann nach dem Download mit QBitTorrent für die automatische Umbenennung verwendet werden, was das automatische Scrapen durch Emby erleichtert. Unterstützt den Betrieb unter Windows, Linux, MacOS, Docker und Synology-Paketumgebungen.
Ein hocheffizienter, schneller, leistungsstarker und leichter Anime-Downloader und Streamer für Ihre Lieblings-Animes.
Anime Garden Mirror Site | Anime BT Resource Aggregation Site | Anime BT Resource Open API
🤖 Daten automatisch aus HTML-Websites scrapen, indem Sie einfach Beispiele bereitstellen
Leichter Ruby-Web-Crawler/Scraper mit einer eleganten DSL, die strukturierte Daten aus Seiten extrahiert.
Cinemagoer ist ein Python-Paket, das nützlich ist, um Daten aus der IMDb-Filmdatenbank (mit der wir in keiner Weise verbunden sind) über Filme, Personen und Charaktere abzurufen und zu verwalten.
Instagram-Beiträge/Profil/Hashtag-Daten ohne Nutzung der Instagram-API abrufen
Ein vollständig überarbeiteter und neu gestalteter Fork mit Unterstützung für OnlyFans und Fansly, der auf Grundlage des ursprünglichen onlyfans-scraper von Grund auf neu konzipiert wurde.
Selbst gehostete Scraping-Engine — umgeht jede JS-Herausforderung und jedes Captcha: Cloudflare, Turnstile, reCAPTCHA, hCaptcha, GeeTest. Alternative zu FlareSolverr und Byparr und direkter Ersatz für Ihren *arr-Stack.
📰 Newspaper4k, eine Abspaltung des beliebten Newspaper3k. Extrahieren von Artikeln, Titeln und Metadaten von Nachrichtenseiten.
Crawly, ein Framework auf hohem Niveau für Web-Crawling und Scraping für Elixir.
Schreiben Sie Web‑Scraper in Ruby mit einer sauberen, KI‑gestützten DSL. Kimurai nutzt KI, um herauszufinden, wo die Daten liegen, speichert dann die Selektoren im Cache und scrapt ausschließlich mit reinem Ruby. Profitieren Sie von der Intelligenz eines LLM ohne die Latenz pro Anfrage oder Token‑Kosten.
Unoffizielle MyAnimeList PHP+REST API, die Funktionen außerhalb der offiziellen API bietet
Ein umfassender Manager, der die Ressourcen im Computer verwaltet und Gamifizierung bereitstellt
Universal Reddit Scraper – Ein umfassendes Befehlszeilentool zum Scraping/Archivieren von Reddit.
Rufe X/Twitter-Tweets, Antworten, Timelines, Suchergebnisse, Listen und X-Artikel ab – ohne Anmeldung oder API-Schlüssel. Python-CLI und -Bibliothek für KI-Agenten: FxTwitter-, Nitter- und Browser-Backends mit automatischem Fallback, einheitlichem JSON und optionalem SQLite-Archiv. Twitter-Beiträge ohne Anmeldung und API abrufen.
Eine sofort einsatzbereite lokale Software zum Scrapen, Verwalten und Abspielen von JAV/Videos, mit Unterstützung für die Ein-Klick-Installation über die Kommandozeile und die Bereitstellung per Docker. Füge einfach ein Verzeichnis hinzu, um deine private JAV-/Videosammlung aufzubauen und ein erstklassiges Browsing-Erlebnis zu genießen. Ein Muss für alle, die es bequem mögen! | Dein lokaler JAV-/Video-Manager.
YouTube Scraper für die mühelose Sammlung öffentlicher YouTube-Daten, einschließlich Video- und Kanalinformationen.
Google Play Scraper für Python, inspiriert von <facundoolano/google-play-scraper>
Offene Datenbank für internationale Sanktionsdaten, Personen von Interesse und politisch exponierte Personen
Eine auf Kotlin basierende Bibliothek für Testing, Scraping und Parsing, die die Fähigkeit bietet, Daten aus HTML (server- und client-seitig gerendert) zu analysieren und zu extrahieren. Sie legt besonderen Wert auf Benutzerfreundlichkeit und hohe Lesbarkeit durch Bereitstellung einer intuitiven DSL. Sie zielt darauf ab, eine Testing-Bibliothek zu sein, kann aber auch auf bequeme Weise verwendet werden, um Websites zu scrapen.
Kommandozeilen-Tool zum Herunterladen und Extrahieren von Daten aus HTML/XML-Seiten oder JSON-APIs unter Verwendung von CSS, XPath 3.0, XQuery 3.0, JSONiq oder Pattern-Matching. Es kann auch neue oder transformierte XML/HTML/JSON-Dokumente erstellen.
Eine vielseitige Ruby-Web-Spidering-Bibliothek, die eine Site, mehrere Domains, bestimmte Links oder unendlich spidern kann. Spidr ist für Schnelligkeit und Benutzerfreundlichkeit konzipiert.
Kostenloses Tool zur Lead-Generierung. Durchsuchen Sie Instagram-, Twitch-, TikTok- und LinkedIn-Profile. Extrahieren Sie E-Mail-Adressen aus den Biografien, überprüfen Sie sie per SMTP und exportieren Sie sie als CSV.
Ein leistungsstarkes Python-Skript, das es Ihnen ermöglicht, Nachrichten und Medien aus Telegram-Kanälen mit der Telethon-Bibliothek zu scrapen. Zu den Funktionen gehören kontinuierliches Scrapen in Echtzeit, Herunterladen von Medien und Datenexportfunktionen.
Ein selbst gehosteter Multi-User-Preisverfolger für Amazon, Aliexpress, ebay und viele weitere sowie benutzerdefinierte Shops. Erhalten Sie Benachrichtigungen, wenn der Preis eine oder mehrere vom Benutzer festgelegte Kriterien erfüllt
Operative Framework ist ein Rust-Untersuchungs-OSINT-Framework. Sie können mit mehreren Zielen interagieren, mehrere Module ausführen, Verbindungen zu Zielen erstellen, Berichte als PDF-Datei exportieren, Notizen zu Zielen oder Ergebnissen hinzufügen, mit RESTful API interagieren und eigene Module schreiben.
🕵️♂️ LinkedIn-Profil-Scraper, der strukturierte Profildaten im JSON-Format zurückgibt.
Telegram-Gruppenmitglieder (auch versteckte Mitglieder) abkratzen und zu Ihren hinzufügen.