Git Stars Git Stars

#scraper 저장소

128
총 리포지토리
792,441
총 별점
6,190
리포지토리당 평균 스타 수

저장소 총 128개

51
rushter/selectolax

Modest 및 Lexbor 엔진에 대한 Python 바인딩. Python용 CSS 선택기가 있는 빠른 HTML5 파서.

rushter
⭐ 1,717 Python 👤 rushter User 🕐 업데이트됨 2026-11-10 📅 생성됨 2017-11-26
52
paulpierre/informer

Python으로 구현된 텔레그램 대량 감시 봇

paulpierre
⭐ 1,679 Python 👤 paulpierre User 🕐 업데이트됨 2025-10-20 📅 생성됨 2019-12-09
53
consumet/api.consumet.org

Anime, 영화/TV 시리즈, 책, 라이트 노벨, 만화 등을 위한 현대적인 검색 엔진 API

consumet
⭐ 1,623 TypeScript 👤 consumet Organization 🕐 업데이트됨 2026-03-13 📅 생성됨 2022-05-22
54
GramAddict/bot

완전히 무료이며 오픈 소스인 사람과 유사한 Instagram 봇입니다. UIAutomator2로 구동되며 Instagram을 실행할 수 있는 5.0 이상 버전의 Android 기기(실제 또는 에뮬레이터)와 기본적으로 호환됩니다.

GramAddict
⭐ 1,558 Python 👤 GramAddict Organization 🕐 업데이트됨 2025-02-16 📅 생성됨 2020-10-29
55
0x676e67/wreq-python

인체공학적이고 개인정보 보호에 신경을 쓴 Python HTTP 클라이언트

0x676e67
⭐ 1,526 Python 👤 0x676e67 User 🕐 업데이트됨 2026-11-15 📅 생성됨 2025-02-10
56
Nriver/Episode-ReName

드라마/애니메이션 자동 이름 변경 도구, 한 번의 클릭으로 일괄 이름 변경. Qbittorrent 다운로드 후 자동으로 이름 변경하여 Emby 자동 스크래핑을 용이하게 할 수 있습니다. Windows, Linux, MacOS, Docker 및 Synology 패키지 환경에서 실행을 지원합니다.

Nriver
⭐ 1,488 Python 👤 Nriver User 🕐 업데이트됨 2025-05-19 📅 생성됨 2021-10-19
57
th3unkn0n/osi.ig

정보 수집 Instagram.

th3unkn0n
⭐ 1,447 Python 👤 th3unkn0n User 🕐 업데이트됨 2024-02-01 📅 생성됨 2019-11-04
58
justfoolingaround/animdl

좋아하는 애니메이션을 위한 매우 효율적이고 빠르며 강력하며 가벼운 애니메이션 다운로더 및 스트리머입니다.

justfoolingaround
⭐ 1,437 Python 👤 justfoolingaround User 🕐 업데이트됨 2024-06-13 📅 생성됨 2021-04-15
59
yjl9903/AnimeGarden

애니메이션 가든 미러 사이트 | 애니메이션 BT 리소스 통합 사이트 | 애니메이션 BT 리소스 개방형 API

yjl9903
⭐ 1,414 TypeScript 👤 yjl9903 User 🕐 업데이트됨 2026-11-21 📅 생성됨 2023-04-08
60
mariostoev/finviz

finviz.com의 비공식 API

mariostoev
⭐ 1,373 Python 👤 mariostoev User 🕐 업데이트됨 2026-11-01 📅 생성됨 2017-11-15
61
lorey/mlscraper

🤖 예시만 제공하여 HTML 웹사이트에서 데이터를 자동으로 스크랩하세요

lorey
⭐ 1,370 Python 👤 lorey User 🕐 업데이트됨 2024-03-17 📅 생성됨 2020-07-30
62
felipecsl/wombat

페이지에서 구조화된 데이터를 추출하는 우아한 DSL을 가진 가벼운 Ruby 웹 크롤러/스크레이퍼.

felipecsl
⭐ 1,360 Ruby 👤 felipecsl User 🕐 업데이트됨 2026-10-27 📅 생성됨 2011-11-14
63
cinemagoer/cinemagoer

Cinemagoer는 IMDb(당사와는 어떠한 관계도 없음) 영화 데이터베이스에서 영화, 인물, 캐릭터에 대한 데이터를 검색하고 관리하는 데 유용한 파이썬 패키지입니다.

cinemagoer
⭐ 1,327 Python 👤 cinemagoer Organization 🕐 업데이트됨 2026-11-10 📅 생성됨 2010-08-01
64
huaying/instagram-crawler

Instagram API를 사용하지 않고 Instagram 게시물/프로필/해시태그 데이터 가져오기

huaying
⭐ 1,299 Python 👤 huaying User 🕐 업데이트됨 2024-05-03 📅 생성됨 2017-09-15
65
datawhores/OF-Scraper

원본 onlyfans-scraper를 기반으로 처음부터 새롭게 구상해 완전히 개선하고 재설계한 포크로, OnlyFans와 Fansly를 지원합니다.

datawhores
⭐ 1,219 Python 👤 datawhores User 🕐 업데이트됨 2026-11-21 📅 생성됨 2023-03-22
66
germondai/trawl

자체 호스팅 스크래핑 엔진 — 모든 JS 챌린지 및 캡차 우회: Cloudflare, Turnstile, reCAPTCHA, hCaptcha, GeeTest. FlareSolverr 및 Byparr의 대안이며 *arr 스택을 직접 대체할 수 있습니다.

germondai
⭐ 1,209 TypeScript 👤 germondai User 🕐 업데이트됨 2026-11-16 📅 생성됨 2026-06-26
67
AndyTheFactory/newspaper4k

📰 Newspaper4k - 사랑받는 Newspaper3k의 포크 버전입니다. 뉴스 웹사이트에서 기사, 제목, 메타데이터를 추출합니다.

AndyTheFactory
⭐ 1,170 Python 👤 AndyTheFactory User 🕐 업데이트됨 2026-11-01 📅 생성됨 2023-10-22
68
obitouka/InstagramPrivSniffer

Instagram "비공개 게시물"을 익명으로 보는 최초의 도구

obitouka
⭐ 1,163 Python 👤 obitouka User 🕐 업데이트됨 2026-09-18 📅 생성됨 2025-07-09
69
scrapfly/scrapfly-scrapers

80개 이상의 인기 도메인을 위한 확장 가능한 Python 웹 스크래핑 스크립트

scrapfly
⭐ 1,133 Python 👤 scrapfly Organization 🕐 업데이트됨 2026-11-21 📅 생성됨 2023-05-22
70
elixir-crawly/crawly

Crawly, Elixir를 위한 고급 웹 크롤링 및 스크래핑 프레임워크.

elixir-crawly
⭐ 1,129 Elixir 👤 elixir-crawly Organization 🕐 업데이트됨 2026-11-20 📅 생성됨 2019-03-09
71
0x676e67/wreq

인체공학적이고 개인정보 보호를 고려한 Rust HTTP 클라이언트

0x676e67
⭐ 1,118 Rust 👤 0x676e67 User 🕐 업데이트됨 2026-11-20 📅 생성됨 2024-09-19
72
vifreefly/kimuraframework

AI 지원 정돈된 DSL을 사용하여 Ruby에서 웹 스크레이퍼를 작성하세요. Kimurai는 AI를 사용해 데이터가 어디에 있는지 파악한 뒤 선택자를 캐시하고 순수 Ruby로 스크레이핑합니다. 요청마다 지연 시간이나 토큰 비용 없이 LLM의 인텔리전스를 활용하세요.

vifreefly
⭐ 1,102 Ruby 👤 vifreefly User 🕐 업데이트됨 2026-01-27 📅 생성됨 2018-08-23
73
jikan-me/jikan

공식 API 이외의 기능을 제공하는 비공식 MyAnimeList PHP+REST API

jikan-me
⭐ 1,095 PHP 👤 jikan-me Organization 🕐 업데이트됨 2026-11-20 📅 생성됨 2017-01-11
74
klsdf/GreenResourcesManager

컴퓨터 내부 자원을 관리하고 게임화 기능을 제공하는 종합 관리자

klsdf
⭐ 1,087 JavaScript 👤 klsdf User 🕐 업데이트됨 2026-11-08 📅 생성됨 2025-06-20
75
JosephLai241/URS

범용 레딧 스크레이퍼 - 포괄적인 레딧 스크래핑/보관용 명령줄 도구입니다.

JosephLai241
⭐ 1,048 Python 👤 JosephLai241 User 🕐 업데이트됨 2026-07-11 📅 생성됨 2019-03-20
76
ythx-101/x-tweet-fetcher

로그인이나 API 키 없이 X/Twitter 게시물, 답글, 타임라인, 검색 결과, 리스트, X Articles를 가져오세요. AI 에이전트용 Python CLI 및 라이브러리로, FxTwitter·Nitter·브라우저 백엔드와 자동 폴백, 통합 JSON, 선택형 SQLite 아카이브를 지원합니다. 로그인이나 API 없이 트위터 게시물을 가져오세요.

ythx-101
⭐ 1,012 Python 👤 ythx-101 User 🕐 업데이트됨 2026-11-12 📅 생성됨 2026-02-14
77
fredwu/crawler

Elixir로 작성된 고성능 웹 크롤러/스크레이퍼.

fredwu
⭐ 963 Elixir 👤 fredwu User 🕐 업데이트됨 2026-11-21 📅 생성됨 2016-08-08
78
Solr159/JavBoss

바로 사용할 수 있는 로컬 JAV/동영상 스크래핑·관리·재생 소프트웨어로, 명령줄 원클릭 설치와 Docker 배포를 지원합니다. 디렉터리만 간단히 추가하면 나만의 프라이빗 JAV/동영상 미디어 라이브러리를 구축하고 최고 수준의 탐색 환경을 누릴 수 있습니다. 귀찮은 것을 싫어하는 분들을 위한 필수 도구입니다! | 나만의 로컬 JAV/동영상 관리자.

Solr159
⭐ 955 Go 👤 Solr159 User 🕐 업데이트됨 2026-11-15 📅 생성됨 2026-03-21
79
oxylabs/youtube-scraper

유튜브 스크래퍼는 영상 및 채널 정보를 포함한 공개 유튜브 데이터를 손쉽게 수집합니다.

oxylabs
⭐ 937 Java 👤 oxylabs Organization 🕐 업데이트됨 2025-09-23 📅 생성됨 2023-10-11
80
JoMingyu/google-play-scraper

<facundoolano/google-play-scraper>에서 영감을 받은 Python용 Google Play 스크래퍼

JoMingyu
⭐ 930 Python 👤 JoMingyu User 🕐 업데이트됨 2024-08-05 📅 생성됨 2019-06-04
⭐ 896 Shell 👤 justchokingaround User 🕐 업데이트됨 2026-09-15 📅 생성됨 2022-07-20
82
scrapinghub/scrapyrt

Scrapy 스파이더용 HTTP API

scrapinghub
⭐ 884 Python 👤 scrapinghub Organization 🕐 업데이트됨 2026-10-13 📅 생성됨 2015-01-06
83
opensanctions/opensanctions

국제 제재 데이터, 관심 대상 인물 및 정치적으로 노출된 인물의 공개 데이터베이스

opensanctions
⭐ 880 Python 👤 opensanctions Organization 🕐 업데이트됨 2026-11-20 📅 생성됨 2015-12-05
84
skrapeit/skrape.it

Kotlin 기반의 테스트/스크래핑/파싱 라이브러리로, 서버 및 클라이언트 측 렌더링된 HTML에서 데이터를 분석하고 추출할 수 있는 기능을 제공합니다. 직관적인 DSL을 제공하여 사용의 용이성과 높은 가독성을 강조합니다. 테스트 라이브러리를 목표로 하지만, 편리한 방식으로 웹사이트를 스크래핑하는 데도 사용할 수 있습니다.

skrapeit
⭐ 874 Kotlin 👤 skrapeit User 🕐 업데이트됨 2026-10-20 📅 생성됨 2019-01-14
85
openzim/zimit

모든 웹사이트에서 ZIM 파일을 만들고 오프라인으로 서핑하세요!

openzim
⭐ 872 Python 👤 openzim Organization 🕐 업데이트됨 2026-11-18 📅 생성됨 2016-06-21
86
HDoujinDownloader/HDoujinDownloader

만능 동인지 및 이미지 갤러리 다운로더

HDoujinDownloader
⭐ 861 Lua 👤 HDoujinDownloader User 🕐 업데이트됨 2026-06-25 📅 생성됨 2019-10-01
87
maoserr/epublifier

일부 웹소설을 epub 형식으로 변환합니다

maoserr
⭐ 845 TypeScript 👤 maoserr User 🕐 업데이트됨 2026-11-01 📅 생성됨 2020-05-09
88
benibela/xidel

HTML/XML 페이지 또는 JSON-API에서 데이터를 다운로드하고 추출하는 명령줄 도구로, CSS, XPath 3.0, XQuery 3.0, JSONiq 또는 패턴 매칭을 사용합니다. 새로운 또는 변환된 XML/HTML/JSON 문서를 생성할 수도 있습니다.

benibela
⭐ 836 Pascal 👤 benibela User 🕐 업데이트됨 2025-02-22 📅 생성됨 2015-06-11
89
postmodern/spidr

다양한 Ruby 웹 스파이더링 라이브러리로, 사이트, 여러 도메인, 특정 링크 또는 무한정 스파이더링할 수 있습니다. Spidr은 빠르고 사용하기 쉬운 디자인입니다.

postmodern
⭐ 835 Ruby 👤 postmodern User 🕐 업데이트됨 2026-01-12 📅 생성됨 2009-03-08
90
kiryano/Scout

무료 리드 생성 도구. Instagram, Twitch, TikTok 및 LinkedIn 프로필을 스크랩하세요. 소개에서 이메일을 추출하고 SMTP를 통해 확인한 후 CSV로 내보내세요.

kiryano
⭐ 824 Python 👤 kiryano User 🕐 업데이트됨 2026-09-05 📅 생성됨 2026-02-06
91
fanyong920/jvppeteer

Chrome 및 Firefox용 Java API

fanyong920
⭐ 805 Java 👤 fanyong920 User 🕐 업데이트됨 2026-10-04 📅 생성됨 2020-03-11
92
unnohwn/telegram-scraper

Telethon 라이브러리를 사용하여 Telegram 채널에서 메시지와 미디어를 스크랩할 수 있는 강력한 Python 스크립트입니다. 실시간 연속 스크래핑, 미디어 다운로드, 데이터 내보내기 기능이 포함됩니다.

unnohwn
⭐ 797 Python 👤 unnohwn User 🕐 업데이트됨 2026-04-11 📅 생성됨 2024-11-04
93
Cybrarist/Discount-Bandit

Amazon, Aliexpress, ebay 및 다수의 사용자 정의 스토어를 위한 멀티유저 셀프호스팅 가격 추적기. 사용자가 설정한 하나 이상의 기준과 가격이 일치할 때 알림을 받으세요

Cybrarist
⭐ 765 PHP 👤 Cybrarist User 🕐 업데이트됨 2026-10-26 📅 생성됨 2023-07-06
94
ZacharyHampton/HomeHarvest

부동산 데이터 스크래핑을 위한 Python 패키지

ZacharyHampton
⭐ 764 Python 👤 ZacharyHampton User 🕐 업데이트됨 2025-12-26 📅 생성됨 2023-09-15
95
graniet/operative-framework

operative framework은 Rust 조사 OSINT 프레임워크입니다. 여러 타겟과 상호작용할 수 있으며, 여러 모듈을 실행하고, 타겟과 링크를 생성하며, 보고서를 PDF 파일로 내보내고, 타겟이나 결과에 노트를 추가하며, RESTFul API와 상호작용하고, 자신의 모듈을 작성할 수 있습니다.

graniet
⭐ 742 Rust 👤 graniet User 🕐 업데이트됨 2025-05-17 📅 생성됨 2017-01-03
96
ruippeixotog/scala-scraper

HTML 페이지에서 콘텐츠를 스크래핑하는 Scala 라이브러리

ruippeixotog
⭐ 731 Scala 👤 ruippeixotog User 🕐 업데이트됨 2026-11-05 📅 생성됨 2014-10-12
97
josephlimtech/linkedin-profile-scraper-api

🕵️‍♂️ LinkedIn 프로필 스크래퍼, JSON 형식의 구조화된 프로필 데이터를 반환합니다.

josephlimtech
⭐ 725 TypeScript 👤 josephlimtech User 🕐 업데이트됨 2024-04-05 📅 생성됨 2018-12-21
98
fa0311/TwitterInternalAPIDocument

Twitter 내부 API 문서

fa0311
⭐ 724 Python 👤 fa0311 User 🕐 업데이트됨 2026-11-21 📅 생성됨 2022-09-04
99
cassidoo/scrapers

웹 곳곳의 스크래퍼 목록.

cassidoo
⭐ 723 👤 cassidoo User 🕐 업데이트됨 2025-02-07 📅 생성됨 2016-04-18
100
AbirHasan2005/TelegramScraper

Telegram 그룹 구성원(숨겨진 구성원 포함)을 스크랩하여 내 그룹에 추가합니다.

AbirHasan2005
⭐ 722 👤 AbirHasan2005 User 🕐 업데이트됨 2026-10-18 📅 생성됨 2020-08-10