Git Stars Git Stars

#scraper Репозитории

128
Всего репозиториев
792,441
Всего звезд
6,190
Среднее количество звезд на репозиторий

Всего репозиториев: 128

51
rushter/selectolax

Python-библиотека для движков Modest и Lexbor. Быстрый парсер HTML5 с CSS-селекторами для Python.

rushter
⭐ 1,717 Python 👤 rushter User 🕐 Обновлено 2026-11-10 📅 Создано 2017-11-26
52
paulpierre/informer

Бот массового наблюдения в Telegram на Python

paulpierre
⭐ 1,679 Python 👤 paulpierre User 🕐 Обновлено 2025-10-20 📅 Создано 2019-12-09
53
consumet/api.consumet.org

Современный API поисковой системы для аниме, фильмов/телешоу, книг, ранобэ, манги и т. д.

consumet
⭐ 1,623 TypeScript 👤 consumet Organization 🕐 Обновлено 2026-03-13 📅 Создано 2022-05-22
54
GramAddict/bot

Полностью бесплатный Instagram-бот с открытым исходным кодом, имитирующий действия человека. Работает на UIAutomator2 и совместим практически с любым устройством Android 5.0+, на котором может быть запущено приложение Instagram — реальным или эмулируемым.

GramAddict
⭐ 1,558 Python 👤 GramAddict Organization 🕐 Обновлено 2025-02-16 📅 Создано 2020-10-29
55
0x676e67/wreq-python

Эргономичный, ориентированный на конфиденциальность HTTP-клиент на Python

0x676e67
⭐ 1,526 Python 👤 0x676e67 User 🕐 Обновлено 2026-11-15 📅 Создано 2025-02-10
56
Nriver/Episode-ReName

Инструмент автоматического переименования сериалов/аниме, пакетное переименование в один клик. Может использоваться совместно с QBittorrent для автоматического переименования после загрузки, что облегчает автоматический парсинг Emby. Поддерживает работу в средах Windows, Linux, MacOS, Docker и пакетах Synology.

Nriver
⭐ 1,488 Python 👤 Nriver User 🕐 Обновлено 2025-05-19 📅 Создано 2021-10-19
57
th3unkn0n/osi.ig

Сбор информации Instagram.

th3unkn0n
⭐ 1,447 Python 👤 th3unkn0n User 🕐 Обновлено 2024-02-01 📅 Создано 2019-11-04
58
justfoolingaround/animdl

Высокоэффективный, быстрый, мощный и легкий загрузчик и стример аниме для ваших любимых аниме.

justfoolingaround
⭐ 1,437 Python 👤 justfoolingaround User 🕐 Обновлено 2024-06-13 📅 Создано 2021-04-15
59
yjl9903/AnimeGarden

Зеркальный сайт Anime Garden | Сайт агрегации BT-ресурсов аниме | Открытый API BT-ресурсов аниме

yjl9903
⭐ 1,414 TypeScript 👤 yjl9903 User 🕐 Обновлено 2026-11-21 📅 Создано 2023-04-08
60
mariostoev/finviz

Неофициальный API для finviz.com

mariostoev
⭐ 1,373 Python 👤 mariostoev User 🕐 Обновлено 2026-11-01 📅 Создано 2017-11-15
61
lorey/mlscraper

🤖 Автоматически собирайте данные с HTML-сайтов, просто предоставляя примеры

lorey
⭐ 1,370 Python 👤 lorey User 🕐 Обновлено 2024-03-17 📅 Создано 2020-07-30
62
felipecsl/wombat

Легковесный веб-краулер/скраппер на Ruby с элегантным DSL, который извлекает структурированные данные из страниц.

felipecsl
⭐ 1,360 Ruby 👤 felipecsl User 🕐 Обновлено 2026-10-27 📅 Создано 2011-11-14
63
cinemagoer/cinemagoer

Cinemagoer — это пакет Python, предназначенный для получения и управления данными из базы данных фильмов IMDb (с которой мы никак не связаны) о фильмах, людях и персонажах.

cinemagoer
⭐ 1,327 Python 👤 cinemagoer Organization 🕐 Обновлено 2026-11-10 📅 Создано 2010-08-01
64
huaying/instagram-crawler

Получить данные постов/профиля/хэштегов Instagram без использования Instagram API

huaying
⭐ 1,299 Python 👤 huaying User 🕐 Обновлено 2024-05-03 📅 Создано 2017-09-15
65
datawhores/OF-Scraper

Полностью обновлённый и переработанный форк с поддержкой OnlyFans и Fansly, заново созданный с нуля на основе оригинального onlyfans-scraper.

datawhores
⭐ 1,219 Python 👤 datawhores User 🕐 Обновлено 2026-11-21 📅 Создано 2023-03-22
66
germondai/trawl

Самостоятельно размещаемый движок для парсинга — обходит любые JS-вызовы и капчи: Cloudflare, Turnstile, reCAPTCHA, hCaptcha, GeeTest. Альтернатива FlareSolverr и Byparr, прямая замена для вашего стека *arr.

germondai
⭐ 1,209 TypeScript 👤 germondai User 🕐 Обновлено 2026-11-16 📅 Создано 2026-06-26
67
AndyTheFactory/newspaper4k

📰 Newspaper4k — ответвление популярного Newspaper3k. Извлечение статей, заголовков и метаданных с новостных сайтов.

AndyTheFactory
⭐ 1,170 Python 👤 AndyTheFactory User 🕐 Обновлено 2026-11-01 📅 Создано 2023-10-22
68
obitouka/InstagramPrivSniffer

Первый инструмент для просмотра "приватных постов Instagram" анонимно

obitouka
⭐ 1,163 Python 👤 obitouka User 🕐 Обновлено 2026-09-18 📅 Создано 2025-07-09
69
scrapfly/scrapfly-scrapers

Масштабируемые Python-скрипты для веб-скрейпинга более чем 80 популярных доменов

scrapfly
⭐ 1,133 Python 👤 scrapfly Organization 🕐 Обновлено 2026-11-21 📅 Создано 2023-05-22
70
elixir-crawly/crawly

Crawly, фреймворк высокого уровня для веб-краулинга и скрейпинга для Elixir.

elixir-crawly
⭐ 1,129 Elixir 👤 elixir-crawly Organization 🕐 Обновлено 2026-11-20 📅 Создано 2019-03-09
71
0x676e67/wreq

Эргономичный HTTP-клиент на Rust с поддержкой конфиденциальности

0x676e67
⭐ 1,118 Rust 👤 0x676e67 User 🕐 Обновлено 2026-11-20 📅 Создано 2024-09-19
72
vifreefly/kimuraframework

Создавайте веб‑скрейперы на Ruby, используя чистый DSL с поддержкой ИИ. Kimurai использует ИИ, чтобы определить, где находятся данные, затем кэширует селекторы и выполняет скрейпинг только на Ruby. Получите интеллектуальные возможности LLM без задержек на запросы и стоимости токенов.

vifreefly
⭐ 1,102 Ruby 👤 vifreefly User 🕐 Обновлено 2026-01-27 📅 Создано 2018-08-23
73
jikan-me/jikan

Неофициальный MyAnimeList PHP+REST API, предоставляющий функции помимо официального API

jikan-me
⭐ 1,095 PHP 👤 jikan-me Organization 🕐 Обновлено 2026-11-20 📅 Создано 2017-01-11
74
klsdf/GreenResourcesManager

Комплексный менеджер, который управляет ресурсами внутри компьютера и обеспечивает геймификацию

klsdf
⭐ 1,087 JavaScript 👤 klsdf User 🕐 Обновлено 2026-11-08 📅 Создано 2025-06-20
75
JosephLai241/URS

Universal Reddit Scraper — Комплексный инструмент командной строки для скрапинга/архивирования Reddit.

JosephLai241
⭐ 1,048 Python 👤 JosephLai241 User 🕐 Обновлено 2026-07-11 📅 Создано 2019-03-20
76
ythx-101/x-tweet-fetcher

Получайте твиты, ответы, ленты, результаты поиска, списки и статьи X/Twitter без входа в систему и ключей API. Python CLI и библиотека для ИИ-агентов: бэкенды FxTwitter, Nitter и браузера с автоматическим переключением, единый формат JSON и дополнительный архив SQLite. Получайте публикации Twitter без входа и API.

ythx-101
⭐ 1,012 Python 👤 ythx-101 User 🕐 Обновлено 2026-11-12 📅 Создано 2026-02-14
77
fredwu/crawler

Высокопроизводительный веб-краулер / скрейпер на Elixir.

fredwu
⭐ 963 Elixir 👤 fredwu User 🕐 Обновлено 2026-11-21 📅 Создано 2016-08-08
78
Solr159/JavBoss

Готовое к использованию локальное приложение для скрейпинга, управления и воспроизведения JAV/видео с поддержкой установки одной командой через командную строку и развёртывания в Docker. Просто добавьте каталог, чтобы создать собственную приватную медиатеку JAV/видео и наслаждаться первоклассным просмотром. Незаменимый инструмент для тех, кто ценит простоту! | Ваш локальный менеджер JAV/видео.

Solr159
⭐ 955 Go 👤 Solr159 User 🕐 Обновлено 2026-11-15 📅 Создано 2026-03-21
79
oxylabs/youtube-scraper

Парсер YouTube для легкого сбора общедоступных данных YouTube, включая информацию о видео и каналах.

oxylabs
⭐ 937 Java 👤 oxylabs Organization 🕐 Обновлено 2025-09-23 📅 Создано 2023-10-11
80
JoMingyu/google-play-scraper

Google Play скрейпер для Python, вдохновленный <facundoolano/google-play-scraper>

JoMingyu
⭐ 930 Python 👤 JoMingyu User 🕐 Обновлено 2024-08-05 📅 Создано 2019-06-04
81
justchokingaround/lobster

ммм лобстер

justchokingaround
⭐ 896 Shell 👤 justchokingaround User 🕐 Обновлено 2026-09-15 📅 Создано 2022-07-20
82
scrapinghub/scrapyrt

HTTP API для пауков Scrapy

scrapinghub
⭐ 884 Python 👤 scrapinghub Organization 🕐 Обновлено 2026-10-13 📅 Создано 2015-01-06
83
opensanctions/opensanctions

Открытая база данных международных санкционных данных, лиц, представляющих интерес, и политически значимых лиц

opensanctions
⭐ 880 Python 👤 opensanctions Organization 🕐 Обновлено 2026-11-20 📅 Создано 2015-12-05
84
skrapeit/skrape.it

Библиотека на базе Kotlin для тестирования, скрапинга и парсинга, предоставляющая возможность анализа и извлечения данных из HTML (отрендеренного на сервере и на клиенте). Она делает особый акцент на удобстве использования и высокую степень читаемости, предоставляя интуитивный DSL. Она предназначена для использования как библиотека тестирования, но также может использоваться для удобного скрапинга веб-сайтов.

skrapeit
⭐ 874 Kotlin 👤 skrapeit User 🕐 Обновлено 2026-10-20 📅 Создано 2019-01-14
85
openzim/zimit

Создайте файл ZIM с любого веб-сайта и просматривайте его в автономном режиме!

openzim
⭐ 872 Python 👤 openzim Organization 🕐 Обновлено 2026-11-18 📅 Создано 2016-06-21
86
HDoujinDownloader/HDoujinDownloader

Универсальный загрузчик додзинси и галерей изображений

HDoujinDownloader
⭐ 861 Lua 👤 HDoujinDownloader User 🕐 Обновлено 2026-06-25 📅 Создано 2019-10-01
87
maoserr/epublifier

Конвертирует некоторые веб-новеллы в формат epub

maoserr
⭐ 845 TypeScript 👤 maoserr User 🕐 Обновлено 2026-11-01 📅 Создано 2020-05-09
88
benibela/xidel

Инструмент командной строки для загрузки и извлечения данных из страниц HTML/XML или JSON-API с использованием CSS, XPath 3.0, XQuery 3.0, JSONiq или сопоставления шаблонов. Он также может создавать новые или преобразованные документы XML/HTML/JSON.

benibela
⭐ 836 Pascal 👤 benibela User 🕐 Обновлено 2025-02-22 📅 Создано 2015-06-11
89
postmodern/spidr

Универсальная библиотека Ruby для веб-скрейпинга, которая может сканировать сайт, несколько доменов, определенные ссылки или бесконечно. Spidr разработан для скорости и простоты использования.

postmodern
⭐ 835 Ruby 👤 postmodern User 🕐 Обновлено 2026-01-12 📅 Создано 2009-03-08
90
kiryano/Scout

Бесплатный инструмент для генерации лидов. Сканируйте профили в Instagram, Twitch, TikTok и LinkedIn. Извлекайте адреса электронной почты из описаний, проверяйте их через SMTP и экспортируйте в CSV.

kiryano
⭐ 824 Python 👤 kiryano User 🕐 Обновлено 2026-09-05 📅 Создано 2026-02-06
91
fanyong920/jvppeteer

Java API для Chrome и Firefox

fanyong920
⭐ 805 Java 👤 fanyong920 User 🕐 Обновлено 2026-10-04 📅 Создано 2020-03-11
92
unnohwn/telegram-scraper

Мощный скрипт Python, который позволяет извлекать сообщения и медиа из каналов Telegram с помощью библиотеки Telethon. Функции включают непрерывный сбор данных в реальном времени, загрузку медиа и возможности экспорта данных.

unnohwn
⭐ 797 Python 👤 unnohwn User 🕐 Обновлено 2026-04-11 📅 Создано 2024-11-04
93
Cybrarist/Discount-Bandit

Многопользовательский самохостируемый трекер цен для Amazon, Aliexpress, ebay и многих других, а также пользовательских магазинов. Получайте уведомления, когда цена соответствует одному или нескольким критериям, установленным пользователем

Cybrarist
⭐ 765 PHP 👤 Cybrarist User 🕐 Обновлено 2026-10-26 📅 Создано 2023-07-06
94
ZacharyHampton/HomeHarvest

Пакет Python для скрейпинга данных о недвижимости

ZacharyHampton
⭐ 764 Python 👤 ZacharyHampton User 🕐 Обновлено 2025-12-26 📅 Создано 2023-09-15
95
graniet/operative-framework

Operative Framework — это фреймворк OSINT для расследований на Rust. Вы можете взаимодействовать с несколькими целями, выполнять несколько модулей, создавать связи с целями, экспортировать отчеты в PDF-файл, добавлять заметки к целям или результатам, взаимодействовать с RESTFul API, писать собственные модули.

graniet
⭐ 742 Rust 👤 graniet User 🕐 Обновлено 2025-05-17 📅 Создано 2017-01-03
96
ruippeixotog/scala-scraper

Библиотека Scala для извлечения контента со страниц HTML

ruippeixotog
⭐ 731 Scala 👤 ruippeixotog User 🕐 Обновлено 2026-11-05 📅 Создано 2014-10-12
97
josephlimtech/linkedin-profile-scraper-api

🕵️‍♂️ Скрапер профилей LinkedIn, возвращающий структурированные данные профиля в формате JSON.

josephlimtech
⭐ 725 TypeScript 👤 josephlimtech User 🕐 Обновлено 2024-04-05 📅 Создано 2018-12-21
98
fa0311/TwitterInternalAPIDocument

Внутренняя документация API Twitter

fa0311
⭐ 724 Python 👤 fa0311 User 🕐 Обновлено 2026-11-21 📅 Создано 2022-09-04
99
cassidoo/scrapers

Список скрейперов из разных уголков сети.

cassidoo
⭐ 723 👤 cassidoo User 🕐 Обновлено 2025-02-07 📅 Создано 2016-04-18
100
AbirHasan2005/TelegramScraper

Скрейпить участников группы Telegram (включая скрытых участников) и добавить их в ваши.

AbirHasan2005
⭐ 722 👤 AbirHasan2005 User 🕐 Обновлено 2026-10-18 📅 Создано 2020-08-10