Git Stars Git Stars

#web-scraping 저장소

381
총 리포지토리
2.1M
총 별점
5,636
리포지토리당 평균 스타 수

저장소 총 382개

201
germondai/trawl

자체 호스팅 스크래핑 엔진 — 모든 JS 챌린지 및 캡차 우회: Cloudflare, Turnstile, reCAPTCHA, hCaptcha, GeeTest. FlareSolverr 및 Byparr의 대안이며 *arr 스택을 직접 대체할 수 있습니다.

germondai
⭐ 1,209 TypeScript 👤 germondai User 🕐 업데이트됨 2026-11-16 📅 생성됨 2026-06-26
202
intoli/user-agents

매일 업데이트되는 데이터로 무작위 사용자 에이전트를 생성하는 JavaScript 라이브러리.

intoli
⭐ 1,194 TypeScript 👤 intoli Organization 🕐 업데이트됨 2026-11-21 📅 생성됨 2018-08-06
203
Evolution0/bandcamp-dl

Bandcamp 앨범을 다운로드하는 간단한 Python 스크립트

Evolution0
⭐ 1,189 Python 👤 Evolution0 User 🕐 업데이트됨 2026-11-18 📅 생성됨 2013-04-29
204
goodreasonai/ScrapeServ

URL을 입력받아 브라우저 스크린샷이 포함된 파일을 반환하는 자체 호스팅 API입니다.

goodreasonai
⭐ 1,184 Python 👤 goodreasonai Organization 🕐 업데이트됨 2025-03-09 📅 생성됨 2025-02-05
205
eshaham/israeli-bank-scrapers

모든 주요 이스라엘 은행 및 신용카드 회사에 대한 스크레이퍼 제공

eshaham
⭐ 1,181 TypeScript 👤 eshaham User 🕐 업데이트됨 2026-11-20 📅 생성됨 2017-07-29
206
dchrastil/ScrapedIn

API 제한 없이 LinkedIn을 스크래핑하는 데이터 정찰 도구

dchrastil
⭐ 1,168 Python 👤 dchrastil User 🕐 업데이트됨 2024-04-11 📅 생성됨 2018-03-29
207
ccd0/4chan-x

익명 이미지 게시판에 다양한 기능을 추가합니다.

ccd0
⭐ 1,163 CoffeeScript 👤 ccd0 User 🕐 업데이트됨 2026-08-27 📅 생성됨 2014-04-01
208
yize8888/maotai

i마오타이, 호로화 예약 스크립트

yize8888
⭐ 1,135 JavaScript 👤 yize8888 User 🕐 업데이트됨 2025-03-08 📅 생성됨 2023-06-20
209
fwonggh/Bthub

Bthub 최신 주소 게시 페이지

fwonggh
⭐ 1,134 HTML 👤 fwonggh User 🕐 업데이트됨 2026-11-21 📅 생성됨 2020-01-11
210
scrapfly/scrapfly-scrapers

80개 이상의 인기 도메인을 위한 확장 가능한 Python 웹 스크래핑 스크립트

scrapfly
⭐ 1,133 Python 👤 scrapfly Organization 🕐 업데이트됨 2026-11-21 📅 생성됨 2023-05-22
211
juancarlospaco/faster-than-requests

Python 3에서 더 빠른 요청

juancarlospaco
⭐ 1,131 Nim 👤 juancarlospaco User 🕐 업데이트됨 2026-11-19 📅 생성됨 2018-11-13
212
cipher387/python-for-OSINT-21-days

이 리포지토리에는 "OSINT를 위한 파이썬. 초보자를 위한 21일 코스" 과정의 각 날짜에 대한 샘플 코드 파일이 포함되어 있습니다.

cipher387
⭐ 1,129 Python 👤 cipher387 User 🕐 업데이트됨 2026-01-06 📅 생성됨 2023-03-26
213
Cloxl/xhshow

Xiaohongshu xs 순수 계산, Xiaohongshu x-s, x-s-common, xsc 등의 필드에 대한 순수 계산 리버스 엔지니어링.

Cloxl
⭐ 1,124 Python 👤 Cloxl User 🕐 업데이트됨 2026-06-11 📅 생성됨 2024-09-11
215
xiaoguyu/wechatDownload

WeChat公众号文章下载工具

xiaoguyu
⭐ 1,107 TypeScript 👤 xiaoguyu User 🕐 업데이트됨 2025-11-28 📅 생성됨 2023-01-03
216
vifreefly/kimuraframework

AI 지원 정돈된 DSL을 사용하여 Ruby에서 웹 스크레이퍼를 작성하세요. Kimurai는 AI를 사용해 데이터가 어디에 있는지 파악한 뒤 선택자를 캐시하고 순수 Ruby로 스크레이핑합니다. 요청마다 지연 시간이나 토큰 비용 없이 LLM의 인텔리전스를 활용하세요.

vifreefly
⭐ 1,102 Ruby 👤 vifreefly User 🕐 업데이트됨 2026-01-27 📅 생성됨 2018-08-23
217
requireCool/stealth.min.js

최신 stealth.min.js를 자동으로 생성합니다.

requireCool
⭐ 1,096 👤 requireCool User 🕐 업데이트됨 2026-11-16 📅 생성됨 2022-04-10
218
caolvchong-top/twitter_download

트위터 이미지 비디오 크롤러; 원클릭 다운로드

caolvchong-top
⭐ 1,087 Python 👤 caolvchong-top User 🕐 업데이트됨 2026-07-28 📅 생성됨 2022-08-23
219
YaoZeyuan/stablog

스테이블 트라이브. 전문 백업으로 웨이보 기록 내보내기, 스테이블!

YaoZeyuan
⭐ 1,085 JavaScript 👤 YaoZeyuan User 🕐 업데이트됨 2026-08-15 📅 생성됨 2019-09-11
220
Anil-matcha/awesome-agent-apis

muapi에서 호스팅하는 660개 이상의 생성형 미디어 모델과 커뮤니티가 제출한 서드파티 API 도구(SEO, 데이터 보강, 소셜, 스크래핑)를 제공합니다. 항목마다 YAML 파일 하나로 구성되며 기능별로 찾아볼 수 있습니다.

Anil-matcha
⭐ 1,070 Python 👤 Anil-matcha User 🕐 업데이트됨 2026-10-14 📅 생성됨 2023-05-06
221
antibrow/antibrow

이미 사용 중인 Playwright API를 지원하는 커널 수준 안티탐지 브라우저입니다. Python + Node SDK, MCP 지원, 로컬 프로필 무제한을 제공합니다. Linux x64 + arm64, macOS Intel + Apple Silicon, Windows x64를 지원합니다.

antibrow
⭐ 1,068 TypeScript 👤 antibrow User 🕐 업데이트됨 2026-09-28 📅 생성됨 2026-07-29
222
IcarusRyy/NewJob

해당 직책의 마지막 수정 시간을 한눈에 볼 수 있습니다. 녹색은 2주 이내, 황갈색은 1.5개월 이내, 붉은색은 1.5개월 이상을 의미합니다.

IcarusRyy
⭐ 1,058 JavaScript 👤 IcarusRyy User 🕐 업데이트됨 2024-06-10 📅 생성됨 2024-05-03
223
stay-leave/weibo-public-opinion-analysis

웨이보 데이터 기반 소셜 미디어 감성 분석 프로젝트, 웨이보 크롤러, LDA 토픽 분석 및 감성 분석 포함.

stay-leave
⭐ 1,058 Python 👤 stay-leave User 🕐 업데이트됨 2026-10-24 📅 생성됨 2021-08-01
224
lm-rebooter
⭐ 1,054 HTML 👤 lm-rebooter User 🕐 업데이트됨 2026-05-06 📅 생성됨 2023-05-31
225
mandatoryprogrammer/thermoptic

스택의 모든 계층에서 Chrome 브라우저로 요청을 완벽하게 위장하는 차세대 HTTP 스텔스 프록시입니다.

mandatoryprogrammer
⭐ 1,053 JavaScript 👤 mandatoryprogrammer User 🕐 업데이트됨 2026-10-25 📅 생성됨 2025-09-02
⭐ 1,041 JavaScript 👤 badlogic User 🕐 업데이트됨 2026-02-17 📅 생성됨 2023-05-08
227
FR13ND8/BruteFb

터뮭스에서 브루트포스 방법으로 페이스북 해킹

FR13ND8
⭐ 1,026 Python 👤 FR13ND8 User 🕐 업데이트됨 2024-07-17 📅 생성됨 2019-01-10
228
janreges/siteone-crawler

SiteOne Crawler는 SEO, 보안, 접근성 및 성능 최적화를 위한 크로스 플랫폼 웹사이트 크롤러 및 분석기이며 개발자, DevOps, QA 엔지니어 및 컨설턴트에게 이상적입니다. Windows, macOS 및 Linux(x64 및 arm64)를 지원합니다.

janreges
⭐ 1,019 Rust 👤 janreges User 🕐 업데이트됨 2026-09-27 📅 생성됨 2023-10-04
229
utkarshkukreti/select.rs

HTML 문서에서 유용한 데이터를 추출하기 위한 Rust 라이브러리, 웹 스크래핑에 적합합니다.

utkarshkukreti
⭐ 1,018 Rust 👤 utkarshkukreti User 🕐 업데이트됨 2025-03-19 📅 생성됨 2015-07-15
230
thepycoach/automation

Python을 이용한 자동화 (Excel, 스크립트 등)

thepycoach
⭐ 1,010 Jupyter Notebook 👤 thepycoach User 🕐 업데이트됨 2024-05-19 📅 생성됨 2021-05-02
231
fferrin/free-medium

Medium 게시물을 무료로 읽기 위한 확장 프로그램

fferrin
⭐ 1,008 JavaScript 👤 fferrin User 🕐 업데이트됨 2025-11-02 📅 생성됨 2024-02-13
232
WittmannF/sort-google-scholar

인용 횟수에 기반한 Google Scholar 검색 결과 랭킹

WittmannF
⭐ 999 Python 👤 WittmannF User 🕐 업데이트됨 2026-10-30 📅 생성됨 2016-04-30
233
maldevel/EmailHarvester

이메일 주소 수집기

maldevel
⭐ 999 Python 👤 maldevel User 🕐 업데이트됨 2026-06-07 📅 생성됨 2016-04-16
234
runesleo/x-reader

10개 이상의 플랫폼을 위한 범용 콘텐츠 리더 MCP 서버

runesleo
⭐ 992 Python 👤 runesleo User 🕐 업데이트됨 2026-11-11 📅 생성됨 2026-02-22
235
borisbabic/browser_cookie3

이것은 browser_cookie의 포크입니다

borisbabic
⭐ 989 Python 👤 borisbabic User 🕐 업데이트됨 2024-12-20 📅 생성됨 2015-04-26
236
MinorJerry/WebVoyager

"WebVoyager: WebVoyager: Building an End-to-End Web Agent with Large Multimodal Models"의 코드

MinorJerry
⭐ 986 Python 👤 MinorJerry User 🕐 업데이트됨 2024-03-04 📅 생성됨 2024-01-24
237
YaoZeyuan/zhihuhelp

Node&TypeScript 기반 Zhihu 어시스턴트 재작성

YaoZeyuan
⭐ 985 TypeScript 👤 YaoZeyuan User 🕐 업데이트됨 2026-10-24 📅 생성됨 2019-02-04
238
nicoxiang/geektime-downloader

Geektime 강의 다운로더, Geektime 칼럼/동영상 강의/일일 강의/대기업 실습/부트캠프 동영상 다운로드 지원

nicoxiang
⭐ 982 Go 👤 nicoxiang User 🕐 업데이트됨 2026-11-19 📅 생성됨 2022-03-12
239
romansky/dom-to-semantic-markdown

LLM과 함께 사용하기 위한 DOM에서 Semantic-Markdown으로

romansky
⭐ 976 TypeScript 👤 romansky User 🕐 업데이트됨 2025-05-21 📅 생성됨 2024-07-22
241
cutetailbud/ff-ruyijs

이 브라우저는 Codex나 Claude Code와 같은 AI 에이전트가 브라우저 자동화 작업을 수행하도록 특별히 제작된 경량 헤드리스 브라우저입니다. 다양한 웹 보호 시스템과 로그인 절차, 리버스 엔지니어링 시나리오를 처리할 수 있도록 설계되었습니다.

cutetailbud
⭐ 968 C++ 👤 cutetailbud User 🕐 업데이트됨 2026-11-19 📅 생성됨 2026-10-28
242
treetrum/amazon-kindle-bulk-downloader

구매한 책에 대한 백업 복사본을 만들 수 있는 이 도구를 사용하여 Kindle 전자책을 보다 자동화된 방식으로 일괄 다운로드할 수 있습니다.

treetrum
⭐ 968 TypeScript 👤 treetrum User 🕐 업데이트됨 2025-02-27 📅 생성됨 2023-04-07
244
HtmlUnit/htmlunit

HtmlUnit은 Java 프로그램을 위한 "GUI 없는 브라우저"입니다.

HtmlUnit
⭐ 951 JavaScript 👤 HtmlUnit Organization 🕐 업데이트됨 2026-11-21 📅 생성됨 2018-09-02
245
JUk1-GH/gpt-promo-scanner

ChatGPT Team (Business) 프로모션 코드 자동 스캔 도구 — 일괄 발견/검증/가격 수집, 17개국 34개 코드 지원, 최대 71% 할인 | ChatGPT Business promo code scanner — batch discovery, validation, price collection, 34 codes across 17 countries, up to 71% off

JUk1-GH
⭐ 948 Python 👤 JUk1-GH User 🕐 업데이트됨 2026-05-15 📅 생성됨 2026-05-11
246
SickleSec/SnowEyes

웹 민감 정보 탐지 및 핑거프린팅을 위한 크롬 확장 프로그램

SickleSec
⭐ 946 JavaScript 👤 SickleSec User 🕐 업데이트됨 2026-08-10 📅 생성됨 2024-12-27
247
BullsEye0/dorks-eye

Dorks Eye Google Hacking Dork Scraping and Searching Script. Dorks Eye는 제가 python 3으로 만든 스크립트입니다. 이 도구를 사용하면 Google Dorks를 쉽게 찾을 수 있습니다. Dork Eye는 인터넷에서 잠재적으로 취약한 웹 페이지 및 애플리케이션 또는 Google의 검색 봇이 수집하는 기타 멋진 정보를 수집합니다. 저자: Jolanda de Koff

BullsEye0
⭐ 940 Python 👤 BullsEye0 User 🕐 업데이트됨 2026-10-01 📅 생성됨 2020-04-30
248
caseychu/spotify-backup

모든 Spotify 재생 목록을 내보내는 Python 스크립트입니다.

caseychu
⭐ 937 Python 👤 caseychu User 🕐 업데이트됨 2024-09-22 📅 생성됨 2014-12-24
249
facundoolano/feedi

개인 피드 리더

facundoolano
⭐ 933 Python 👤 facundoolano User 🕐 업데이트됨 2026-09-19 📅 생성됨 2023-07-15
250
browser-use/awesome-prompts

멋진 브라우저 사용 프롬프트 테이블

browser-use
⭐ 926 👤 browser-use Organization 🕐 업데이트됨 2025-03-26 📅 생성됨 2025-03-26