Git Stars Git Stars

#scraper Repositories

128
Gesamtzahl der Repositories
792,441
Gesamtanzahl der Sterne
6,190
Durchschnittliche Sterne/Repo

Insgesamt 128 Repositories

51
rushter/selectolax

Python-Binding für Modest- und Lexbor-Engines. Schneller HTML5-Parser mit CSS-Selektoren für Python.

rushter
⭐ 1,717 Python 👤 rushter User 🕐 Aktualisiert 2026-11-10 📅 Erstellt 2017-11-26
52
paulpierre/informer

Ein Telegram-Massensurveillance-Bot in Python

paulpierre
⭐ 1,679 Python 👤 paulpierre User 🕐 Aktualisiert 2025-10-20 📅 Erstellt 2019-12-09
53
consumet/api.consumet.org

Eine moderne Suchmaschinen-API für Anime, Filme/TV-Serien, Bücher, Light Novels, Manga usw.

consumet
⭐ 1,623 TypeScript 👤 consumet Organization 🕐 Aktualisiert 2026-03-13 📅 Erstellt 2022-05-22
54
GramAddict/bot

Vollständig kostenloser und quelloffener, menschenähnlicher Instagram-Bot. Angetrieben von UIAutomator2 und kompatibel mit praktisch jedem Android-Gerät ab 5.0+, das Instagram ausführen kann – real oder emuliert.

GramAddict
⭐ 1,558 Python 👤 GramAddict Organization 🕐 Aktualisiert 2025-02-16 📅 Erstellt 2020-10-29
55
0x676e67/wreq-python

Ein ergonomischer, datenschutzbewusster Python-HTTP-Client

0x676e67
⭐ 1,526 Python 👤 0x676e67 User 🕐 Aktualisiert 2026-11-15 📅 Erstellt 2025-02-10
56
Nriver/Episode-ReName

Automatisches Umbenennungstool für Serien/Anime, Massenumbenennung mit einem Klick. Kann nach dem Download mit QBitTorrent für die automatische Umbenennung verwendet werden, was das automatische Scrapen durch Emby erleichtert. Unterstützt den Betrieb unter Windows, Linux, MacOS, Docker und Synology-Paketumgebungen.

Nriver
⭐ 1,488 Python 👤 Nriver User 🕐 Aktualisiert 2025-05-19 📅 Erstellt 2021-10-19
57
th3unkn0n/osi.ig

Informationssammlung Instagram.

th3unkn0n
⭐ 1,447 Python 👤 th3unkn0n User 🕐 Aktualisiert 2024-02-01 📅 Erstellt 2019-11-04
58
justfoolingaround/animdl

Ein hocheffizienter, schneller, leistungsstarker und leichter Anime-Downloader und Streamer für Ihre Lieblings-Animes.

justfoolingaround
⭐ 1,437 Python 👤 justfoolingaround User 🕐 Aktualisiert 2024-06-13 📅 Erstellt 2021-04-15
59
yjl9903/AnimeGarden

Anime Garden Mirror Site | Anime BT Resource Aggregation Site | Anime BT Resource Open API

yjl9903
⭐ 1,414 TypeScript 👤 yjl9903 User 🕐 Aktualisiert 2026-11-21 📅 Erstellt 2023-04-08
60
mariostoev/finviz

Unoffizielle API für finviz.com

mariostoev
⭐ 1,373 Python 👤 mariostoev User 🕐 Aktualisiert 2026-11-01 📅 Erstellt 2017-11-15
61
lorey/mlscraper

🤖 Daten automatisch aus HTML-Websites scrapen, indem Sie einfach Beispiele bereitstellen

lorey
⭐ 1,370 Python 👤 lorey User 🕐 Aktualisiert 2024-03-17 📅 Erstellt 2020-07-30
62
felipecsl/wombat

Leichter Ruby-Web-Crawler/Scraper mit einer eleganten DSL, die strukturierte Daten aus Seiten extrahiert.

felipecsl
⭐ 1,360 Ruby 👤 felipecsl User 🕐 Aktualisiert 2026-10-27 📅 Erstellt 2011-11-14
63
cinemagoer/cinemagoer

Cinemagoer ist ein Python-Paket, das nützlich ist, um Daten aus der IMDb-Filmdatenbank (mit der wir in keiner Weise verbunden sind) über Filme, Personen und Charaktere abzurufen und zu verwalten.

cinemagoer
⭐ 1,327 Python 👤 cinemagoer Organization 🕐 Aktualisiert 2026-11-10 📅 Erstellt 2010-08-01
64
huaying/instagram-crawler

Instagram-Beiträge/Profil/Hashtag-Daten ohne Nutzung der Instagram-API abrufen

huaying
⭐ 1,299 Python 👤 huaying User 🕐 Aktualisiert 2024-05-03 📅 Erstellt 2017-09-15
65
datawhores/OF-Scraper

Ein vollständig überarbeiteter und neu gestalteter Fork mit Unterstützung für OnlyFans und Fansly, der auf Grundlage des ursprünglichen onlyfans-scraper von Grund auf neu konzipiert wurde.

datawhores
⭐ 1,219 Python 👤 datawhores User 🕐 Aktualisiert 2026-11-21 📅 Erstellt 2023-03-22
66
germondai/trawl

Selbst gehostete Scraping-Engine — umgeht jede JS-Herausforderung und jedes Captcha: Cloudflare, Turnstile, reCAPTCHA, hCaptcha, GeeTest. Alternative zu FlareSolverr und Byparr und direkter Ersatz für Ihren *arr-Stack.

germondai
⭐ 1,209 TypeScript 👤 germondai User 🕐 Aktualisiert 2026-11-16 📅 Erstellt 2026-06-26
67
AndyTheFactory/newspaper4k

📰 Newspaper4k, eine Abspaltung des beliebten Newspaper3k. Extrahieren von Artikeln, Titeln und Metadaten von Nachrichtenseiten.

AndyTheFactory
⭐ 1,170 Python 👤 AndyTheFactory User 🕐 Aktualisiert 2026-11-01 📅 Erstellt 2023-10-22
68
obitouka/InstagramPrivSniffer

Erstes Tool zum anonymen Ansehen von "Instagram-privaten Posts"

obitouka
⭐ 1,163 Python 👤 obitouka User 🕐 Aktualisiert 2026-09-18 📅 Erstellt 2025-07-09
69
scrapfly/scrapfly-scrapers

Skalierbare Python-Web-Scraping-Skripte für über 80 beliebte Domains

scrapfly
⭐ 1,133 Python 👤 scrapfly Organization 🕐 Aktualisiert 2026-11-21 📅 Erstellt 2023-05-22
70
elixir-crawly/crawly

Crawly, ein Framework auf hohem Niveau für Web-Crawling und Scraping für Elixir.

elixir-crawly
⭐ 1,129 Elixir 👤 elixir-crawly Organization 🕐 Aktualisiert 2026-11-20 📅 Erstellt 2019-03-09
71
0x676e67/wreq

Ein ergonomischer, datenschutzbewusster Rust-HTTP-Client

0x676e67
⭐ 1,118 Rust 👤 0x676e67 User 🕐 Aktualisiert 2026-11-20 📅 Erstellt 2024-09-19
72
vifreefly/kimuraframework

Schreiben Sie Web‑Scraper in Ruby mit einer sauberen, KI‑gestützten DSL. Kimurai nutzt KI, um herauszufinden, wo die Daten liegen, speichert dann die Selektoren im Cache und scrapt ausschließlich mit reinem Ruby. Profitieren Sie von der Intelligenz eines LLM ohne die Latenz pro Anfrage oder Token‑Kosten.

vifreefly
⭐ 1,102 Ruby 👤 vifreefly User 🕐 Aktualisiert 2026-01-27 📅 Erstellt 2018-08-23
73
jikan-me/jikan

Unoffizielle MyAnimeList PHP+REST API, die Funktionen außerhalb der offiziellen API bietet

jikan-me
⭐ 1,095 PHP 👤 jikan-me Organization 🕐 Aktualisiert 2026-11-20 📅 Erstellt 2017-01-11
74
klsdf/GreenResourcesManager

Ein umfassender Manager, der die Ressourcen im Computer verwaltet und Gamifizierung bereitstellt

klsdf
⭐ 1,087 JavaScript 👤 klsdf User 🕐 Aktualisiert 2026-11-08 📅 Erstellt 2025-06-20
75
JosephLai241/URS

Universal Reddit Scraper – Ein umfassendes Befehlszeilentool zum Scraping/Archivieren von Reddit.

JosephLai241
⭐ 1,048 Python 👤 JosephLai241 User 🕐 Aktualisiert 2026-07-11 📅 Erstellt 2019-03-20
76
ythx-101/x-tweet-fetcher

Rufe X/Twitter-Tweets, Antworten, Timelines, Suchergebnisse, Listen und X-Artikel ab – ohne Anmeldung oder API-Schlüssel. Python-CLI und -Bibliothek für KI-Agenten: FxTwitter-, Nitter- und Browser-Backends mit automatischem Fallback, einheitlichem JSON und optionalem SQLite-Archiv. Twitter-Beiträge ohne Anmeldung und API abrufen.

ythx-101
⭐ 1,012 Python 👤 ythx-101 User 🕐 Aktualisiert 2026-11-12 📅 Erstellt 2026-02-14
77
fredwu/crawler

Ein leistungsstarker Webcrawler / Scraper in Elixir.

fredwu
⭐ 963 Elixir 👤 fredwu User 🕐 Aktualisiert 2026-11-21 📅 Erstellt 2016-08-08
78
Solr159/JavBoss

Eine sofort einsatzbereite lokale Software zum Scrapen, Verwalten und Abspielen von JAV/Videos, mit Unterstützung für die Ein-Klick-Installation über die Kommandozeile und die Bereitstellung per Docker. Füge einfach ein Verzeichnis hinzu, um deine private JAV-/Videosammlung aufzubauen und ein erstklassiges Browsing-Erlebnis zu genießen. Ein Muss für alle, die es bequem mögen! | Dein lokaler JAV-/Video-Manager.

Solr159
⭐ 955 Go 👤 Solr159 User 🕐 Aktualisiert 2026-11-15 📅 Erstellt 2026-03-21
79
oxylabs/youtube-scraper

YouTube Scraper für die mühelose Sammlung öffentlicher YouTube-Daten, einschließlich Video- und Kanalinformationen.

oxylabs
⭐ 937 Java 👤 oxylabs Organization 🕐 Aktualisiert 2025-09-23 📅 Erstellt 2023-10-11
80
JoMingyu/google-play-scraper

Google Play Scraper für Python, inspiriert von <facundoolano/google-play-scraper>

JoMingyu
⭐ 930 Python 👤 JoMingyu User 🕐 Aktualisiert 2024-08-05 📅 Erstellt 2019-06-04
⭐ 896 Shell 👤 justchokingaround User 🕐 Aktualisiert 2026-09-15 📅 Erstellt 2022-07-20
82
scrapinghub/scrapyrt

HTTP-API für Scrapy-Spinnen

scrapinghub
⭐ 884 Python 👤 scrapinghub Organization 🕐 Aktualisiert 2026-10-13 📅 Erstellt 2015-01-06
83
opensanctions/opensanctions

Offene Datenbank für internationale Sanktionsdaten, Personen von Interesse und politisch exponierte Personen

opensanctions
⭐ 880 Python 👤 opensanctions Organization 🕐 Aktualisiert 2026-11-20 📅 Erstellt 2015-12-05
84
skrapeit/skrape.it

Eine auf Kotlin basierende Bibliothek für Testing, Scraping und Parsing, die die Fähigkeit bietet, Daten aus HTML (server- und client-seitig gerendert) zu analysieren und zu extrahieren. Sie legt besonderen Wert auf Benutzerfreundlichkeit und hohe Lesbarkeit durch Bereitstellung einer intuitiven DSL. Sie zielt darauf ab, eine Testing-Bibliothek zu sein, kann aber auch auf bequeme Weise verwendet werden, um Websites zu scrapen.

skrapeit
⭐ 874 Kotlin 👤 skrapeit User 🕐 Aktualisiert 2026-10-20 📅 Erstellt 2019-01-14
85
openzim/zimit

Erstellen Sie eine ZIM-Datei von jeder Website und surfen Sie offline!

openzim
⭐ 872 Python 👤 openzim Organization 🕐 Aktualisiert 2026-11-18 📅 Erstellt 2016-06-21
86
HDoujinDownloader/HDoujinDownloader

Ein allgemeiner Doujinshi- und Bildergalerie-Downloader

HDoujinDownloader
⭐ 861 Lua 👤 HDoujinDownloader User 🕐 Aktualisiert 2026-06-25 📅 Erstellt 2019-10-01
87
maoserr/epublifier

Konvertiert einige Webnovellen in das EPUB-Format

maoserr
⭐ 845 TypeScript 👤 maoserr User 🕐 Aktualisiert 2026-11-01 📅 Erstellt 2020-05-09
88
benibela/xidel

Kommandozeilen-Tool zum Herunterladen und Extrahieren von Daten aus HTML/XML-Seiten oder JSON-APIs unter Verwendung von CSS, XPath 3.0, XQuery 3.0, JSONiq oder Pattern-Matching. Es kann auch neue oder transformierte XML/HTML/JSON-Dokumente erstellen.

benibela
⭐ 836 Pascal 👤 benibela User 🕐 Aktualisiert 2025-02-22 📅 Erstellt 2015-06-11
89
postmodern/spidr

Eine vielseitige Ruby-Web-Spidering-Bibliothek, die eine Site, mehrere Domains, bestimmte Links oder unendlich spidern kann. Spidr ist für Schnelligkeit und Benutzerfreundlichkeit konzipiert.

postmodern
⭐ 835 Ruby 👤 postmodern User 🕐 Aktualisiert 2026-01-12 📅 Erstellt 2009-03-08
90
kiryano/Scout

Kostenloses Tool zur Lead-Generierung. Durchsuchen Sie Instagram-, Twitch-, TikTok- und LinkedIn-Profile. Extrahieren Sie E-Mail-Adressen aus den Biografien, überprüfen Sie sie per SMTP und exportieren Sie sie als CSV.

kiryano
⭐ 824 Python 👤 kiryano User 🕐 Aktualisiert 2026-09-05 📅 Erstellt 2026-02-06
91
fanyong920/jvppeteer

Java API für Chrome und Firefox

fanyong920
⭐ 805 Java 👤 fanyong920 User 🕐 Aktualisiert 2026-10-04 📅 Erstellt 2020-03-11
92
unnohwn/telegram-scraper

Ein leistungsstarkes Python-Skript, das es Ihnen ermöglicht, Nachrichten und Medien aus Telegram-Kanälen mit der Telethon-Bibliothek zu scrapen. Zu den Funktionen gehören kontinuierliches Scrapen in Echtzeit, Herunterladen von Medien und Datenexportfunktionen.

unnohwn
⭐ 797 Python 👤 unnohwn User 🕐 Aktualisiert 2026-04-11 📅 Erstellt 2024-11-04
93
Cybrarist/Discount-Bandit

Ein selbst gehosteter Multi-User-Preisverfolger für Amazon, Aliexpress, ebay und viele weitere sowie benutzerdefinierte Shops. Erhalten Sie Benachrichtigungen, wenn der Preis eine oder mehrere vom Benutzer festgelegte Kriterien erfüllt

Cybrarist
⭐ 765 PHP 👤 Cybrarist User 🕐 Aktualisiert 2026-10-26 📅 Erstellt 2023-07-06
94
ZacharyHampton/HomeHarvest

Python-Paket zum Abrufen von Immobiliendaten

ZacharyHampton
⭐ 764 Python 👤 ZacharyHampton User 🕐 Aktualisiert 2025-12-26 📅 Erstellt 2023-09-15
95
graniet/operative-framework

Operative Framework ist ein Rust-Untersuchungs-OSINT-Framework. Sie können mit mehreren Zielen interagieren, mehrere Module ausführen, Verbindungen zu Zielen erstellen, Berichte als PDF-Datei exportieren, Notizen zu Zielen oder Ergebnissen hinzufügen, mit RESTful API interagieren und eigene Module schreiben.

graniet
⭐ 742 Rust 👤 graniet User 🕐 Aktualisiert 2025-05-17 📅 Erstellt 2017-01-03
96
ruippeixotog/scala-scraper

Eine Scala-Bibliothek zum Extrahieren von Inhalten aus HTML-Seiten

ruippeixotog
⭐ 731 Scala 👤 ruippeixotog User 🕐 Aktualisiert 2026-11-05 📅 Erstellt 2014-10-12
97
josephlimtech/linkedin-profile-scraper-api

🕵️‍♂️ LinkedIn-Profil-Scraper, der strukturierte Profildaten im JSON-Format zurückgibt.

josephlimtech
⭐ 725 TypeScript 👤 josephlimtech User 🕐 Aktualisiert 2024-04-05 📅 Erstellt 2018-12-21
98
fa0311/TwitterInternalAPIDocument

Twitter Interne API Dokumentation

fa0311
⭐ 724 Python 👤 fa0311 User 🕐 Aktualisiert 2026-11-21 📅 Erstellt 2022-09-04
99
cassidoo/scrapers

Eine Liste von Scrapern aus dem gesamten Web.

cassidoo
⭐ 723 👤 cassidoo User 🕐 Aktualisiert 2025-02-07 📅 Erstellt 2016-04-18
100
AbirHasan2005/TelegramScraper

Telegram-Gruppenmitglieder (auch versteckte Mitglieder) abkratzen und zu Ihren hinzufügen.

AbirHasan2005
⭐ 722 👤 AbirHasan2005 User 🕐 Aktualisiert 2026-10-18 📅 Erstellt 2020-08-10