Git Stars Git Stars

#web-scraping 저장소

381
총 리포지토리
2.1M
총 별점
5,636
리포지토리당 평균 스타 수

저장소 총 382개

251
aws/nova-act

Amazon Nova Act는 UI 기반 워크플로우를 대규모로 자동화하는 고도로 신뢰할 수 있는 AI 에이전트를 구축하고 배포하기 위한 AWS 서비스입니다.

aws
⭐ 920 Python 👤 aws Organization 🕐 업데이트됨 2026-11-19 📅 생성됨 2025-03-10
252
goose3/goose3

Python 3와 호환되는 goose 버전 http://goose3.readthedocs.io/en/latest/index.html

goose3
⭐ 916 HTML 👤 goose3 Organization 🕐 업데이트됨 2026-07-23 📅 생성됨 2016-12-11
253
MobinX/awesome-mcp-list

MCP 서버 간결 목록

MobinX
⭐ 915 👤 MobinX User 🕐 업데이트됨 2026-11-19 📅 생성됨 2025-03-24
254
Borber/seam

다중 라이브 방송 플랫폼의 라이브 소스 가져오기

Borber
⭐ 909 Rust 👤 Borber User 🕐 업데이트됨 2024-01-22 📅 생성됨 2020-03-24
255
Rishikant181/Rettiwt-API

Twitter에서 무료로 데이터를 가져오는 CLI 도구 및 API!

Rishikant181
⭐ 904 TypeScript 👤 Rishikant181 User 🕐 업데이트됨 2026-11-10 📅 생성됨 2022-01-24
256
Cl0udG0d/Fofa-hack

비유료 회원, fofa 데이터 수집 도구

Cl0udG0d
⭐ 882 Python 👤 Cl0udG0d User 🕐 업데이트됨 2025-10-28 📅 생성됨 2022-09-15
257
KartikTalwar/Duolingo

Python으로 작성된 비공식 Duolingo API

KartikTalwar
⭐ 881 Python 👤 KartikTalwar User 🕐 업데이트됨 2024-04-12 📅 생성됨 2013-07-03
258
coddingtonbear/python-myfitnesspal

MyFitnessPal에 저장된 식사 추적 데이터를 프로그래밍 방식으로 액세스하세요

coddingtonbear
⭐ 875 Python 👤 coddingtonbear User 🕐 업데이트됨 2025-09-28 📅 생성됨 2013-07-16
259
oss-invisible/playwright_mcp

Invisible Playwright MCP: 봇 방지 시스템과 CAPTCHA에 탐지되지 않는 Playwright MCP 서버. AI 에이전트가 탐지 방지 스텔스 Firefox, Python, 탐지되지 않는 브라우저 자동화, 스크래핑, 컴퓨터 사용 기능으로 웹을 탐색합니다.

oss-invisible
⭐ 869 Python 👤 oss-invisible Organization 🕐 업데이트됨 2026-11-20 📅 생성됨 2026-09-29
260
oxylabs/agent-skills

Oxylabs 제품의 공식 Agent 스킬

oxylabs
⭐ 869 JavaScript 👤 oxylabs Organization 🕐 업데이트됨 2026-11-18 📅 생성됨 2026-02-17
261
844704781/ximalaya_downloader

⭐️ 귀엽고 고집 센 히말라야 앨범 오디오 무제한 다운로더 O(∩_∩)O

844704781
⭐ 868 JavaScript 👤 844704781 User 🕐 업데이트됨 2026-09-20 📅 생성됨 2024-05-17
262
ttlns/Selenium-Driverless

은밀한 브라우저 자동화 프레임워크

ttlns
⭐ 860 Python 👤 ttlns User 🕐 업데이트됨 2026-10-20 📅 생성됨 2023-07-21
263
akkuman/rotateproxy

Fofa를 사용하여 socks5 오픈 프록시를 검색하여 프록시 풀을 교체하는 도구

akkuman
⭐ 859 Go 👤 akkuman User 🕐 업데이트됨 2025-05-20 📅 생성됨 2021-10-18
264
Hong-Kong-Emergency-Coordination-Hub/Hong-Kong-Fire-Documentary

홍콩 화재 (타이포, 11/26): 왕푹 코트에 대형 화재가 발생했습니다

Hong-Kong-Emergency-Coordination-Hub
⭐ 854 HTML 👤 Hong-Kong-Emergency-Coordination-Hub Organization 🕐 업데이트됨 2025-12-05 📅 생성됨 2025-11-28
265
AtuboDad
⭐ 851 Python 👤 AtuboDad User 🕐 업데이트됨 2024-07-29 📅 생성됨 2020-12-22
266
zgq354/weibo-rss

🍰 좋아하는 웨이보를 RSS 구독 소스로 변환

zgq354
⭐ 847 TypeScript 👤 zgq354 User 🕐 업데이트됨 2026-10-20 📅 생성됨 2017-09-30
267
kiliman/tailwindui-crawler

tailwindui-crawler가 구성 요소 HTML 파일을 로컬에 다운로드합니다

kiliman
⭐ 840 JavaScript 👤 kiliman User 🕐 업데이트됨 2025-11-05 📅 생성됨 2020-03-06
268
postmodern/spidr

다양한 Ruby 웹 스파이더링 라이브러리로, 사이트, 여러 도메인, 특정 링크 또는 무한정 스파이더링할 수 있습니다. Spidr은 빠르고 사용하기 쉬운 디자인입니다.

postmodern
⭐ 835 Ruby 👤 postmodern User 🕐 업데이트됨 2026-01-12 📅 생성됨 2009-03-08
269
OriX6/liveRecordAuto

Electron 기반의 멀티플랫폼 라이브 스트리밍 자동 녹화 소프트웨어, 抖音/快手 다중 링크 형식 지원

OriX6
⭐ 828 👤 OriX6 User 🕐 업데이트됨 2024-03-07 📅 생성됨 2023-08-27
270
hcjohn463/JableTVDownload

jable 도우미 다운로드

hcjohn463
⭐ 823 Python 👤 hcjohn463 User 🕐 업데이트됨 2026-08-13 📅 생성됨 2021-01-10
271
hollingsworthd/jBrowserDriver

Selenium WebDriver 사양과 호환되는 프로그래밍 가능하고 임베딩 가능한 웹 브라우저 드라이버 -- 헤드리스, WebKit 기반, 순수 Java

hollingsworthd
⭐ 818 Java 👤 hollingsworthd User 🕐 업데이트됨 2026-11-17 📅 생성됨 2015-01-15
272
tiliondev/fortress

코드 한 줄만 변경하면 스크레이퍼와 브라우저 에이전트가 차단되지 않도록 해주는 스텔스 Chromium 엔진입니다.

tiliondev
⭐ 817 Python 👤 tiliondev Organization 🕐 업데이트됨 2026-11-03 📅 생성됨 2026-07-02
273
Kaliiiiiiiiii-Vinyzu/patchright-nodejs

Playwright 테스트 및 자동화 라이브러리의 감지되지 않은 NodeJS 버전입니다.

Kaliiiiiiiiii-Vinyzu
⭐ 813 TypeScript 👤 Kaliiiiiiiiii-Vinyzu Organization 🕐 업데이트됨 2026-11-10 📅 생성됨 2024-11-02
274
zhaotoday/fingerprint-browser

지문 브라우저(계정 간 연관성 방지 브라우저 / 안티디텍트 브라우저 / Antidetect Browser)와 주거용 프록시 IP 선택 가이드 및 오픈 소스 리소스 모음: 주요 지문 브라우저 27종과 프록시 IP 제공업체 28곳의 요금제를 정리하고, Chromium 지문 사용자 지정, Camoufox, Patchright, 안티디텍트 자동화 및 지문 탐지 도구를 소개합니다.

zhaotoday
⭐ 813 👤 zhaotoday User 🕐 업데이트됨 2026-11-15 📅 생성됨 2023-11-05
275
zqzess/MyWebStorage

웹상의 기존 향색규각 소스를 통합하고, 크롤러가 매주 자동으로 소스를 업데이트합니다

zqzess
⭐ 813 HTML 👤 zqzess User 🕐 업데이트됨 2026-11-16 📅 생성됨 2021-05-18
276
feder-cr/invisible_selenium

안티봇 시스템에 감지되지 않는 Selenium으로 CAPTCHA가 필요 없습니다: 동일한 API, 탐지 방지 스텔스 헤드리스 Firefox, 감지되지 않는 브라우저 지문, 봇 탐지 우회, Python 웹 스크래핑 및 브라우저 자동화.

feder-cr
⭐ 808 Python 👤 feder-cr User 🕐 업데이트됨 2026-10-19 📅 생성됨 2024-08-16
277
justjavac/weibo-trending-hot-search

웨이보 인기 검색어 순위는 2020년 11월 24일부터 웨이보의 인기 검색어를 기록합니다. 데이터는 매시간 수집되며 매일 보관됩니다.

justjavac
⭐ 804 TypeScript 👤 justjavac User 🕐 업데이트됨 2026-11-21 📅 생성됨 2020-11-24
278
longxiaofei/spider-BaiduIndex

Baidu Index용 데이터 SDK

longxiaofei
⭐ 800 Python 👤 longxiaofei User 🕐 업데이트됨 2025-11-24 📅 생성됨 2018-09-27
279
MrTurvey/flareprox

Cloudflare를 사용하여 fireprox와 유사하게 고유 IP 회전을 위한 HTTP 통과 프록시를 생성하세요.

MrTurvey
⭐ 799 Python 👤 MrTurvey User 🕐 업데이트됨 2025-11-11 📅 생성됨 2025-09-26
280
chinoogawa/instaBrute

Instagram 브루트포스 익스플로잇 모듈

chinoogawa
⭐ 798 Python 👤 chinoogawa User 🕐 업데이트됨 2024-03-29 📅 생성됨 2015-08-04
281
hyperbrowserai/mcp

하이퍼 브라우저를 위한 MCP 서버 구현

hyperbrowserai
⭐ 795 TypeScript 👤 hyperbrowserai Organization 🕐 업데이트됨 2025-11-20 📅 생성됨 2025-02-25
282
discourse/onebox

(DEPRECATED) URL을 웹사이트 미리보기로 바꾸는 Gem

discourse
⭐ 792 Ruby 👤 discourse Organization 🕐 업데이트됨 2024-02-01 📅 생성됨 2013-07-09
283
figranium/figranium

블록을 시각적으로 쌓아 복잡한 브라우저 워크플로를 구축하고 API를 통해 실행하세요

figranium
⭐ 791 JavaScript 👤 figranium Organization 🕐 업데이트됨 2026-11-21 📅 생성됨 2025-12-25
284
DoctorD1501/JAVMovieScraper

XBMC 및 Kodi 영화 메타데이터를 스크랩하고 일본 성인 비디오(JAV), 미국 성인 DVD 및 미국 성인 웹 콘텐츠의 파일 이름을 자동으로 변경합니다.

DoctorD1501
⭐ 789 Java 👤 DoctorD1501 User 🕐 업데이트됨 2024-03-14 📅 생성됨 2014-07-27
286
checkToke/yangtai

청룡 패널, 참여, 바누 훠궈, FAW-폭스바겐, 하이디라오, 왓슨스, 바왕차희, 화주회, 동성회, 완다 호텔, 이허탕 자동 체크인. DJI 스토어 재고 및 가격 변동 모니터링

checkToke
⭐ 782 JavaScript 👤 checkToke User 🕐 업데이트됨 2025-10-23 📅 생성됨 2024-06-24
287
lonnyzhang423/douyin-hot-hub

도우인 핫 토픽, 스타, 라이브 스트리밍, 뮤직, 브랜드 차트 기록, 매시간 업데이트, 일별 보관.

lonnyzhang423
⭐ 782 Python 👤 lonnyzhang423 User 🕐 업데이트됨 2026-10-22 📅 생성됨 2021-01-09
288
quantumproxies/quantumproxies.io

200개 이상의 국가에서 9,000만 개 이상의 IP를 제공하는 주거용, 데이터센터, ISP 및 모바일 프록시와 스크래퍼 및 SERP API. Python, Node.js, PHP, Go, Java, C#, Ruby 및 curl 코드 예제 제공.

quantumproxies
⭐ 780 Java 👤 quantumproxies User 🕐 업데이트됨 2026-09-06 📅 생성됨 2025-11-17
289
letr007/CCTVVideoDownloader

CCTV.com을 위한 네트워크 비디오 스트림 분석 및 처리 도구

letr007
⭐ 774 C++ 👤 letr007 User 🕐 업데이트됨 2026-11-13 📅 생성됨 2023-12-29
290
mattsse/voyager

rust로 웹페이지 크롤링 및 스크래핑

mattsse
⭐ 767 Rust 👤 mattsse User 🕐 업데이트됨 2024-12-14 📅 생성됨 2020-12-22
291
pbeenigg/LittleCrawler

LittleCrawler(小爬虫)은 Xiaohongshu(xhs), Zhihu(zh), XianYu(xy) 플랫폼의 공개 정보를 수집합니다.

pbeenigg
⭐ 764 Python 👤 pbeenigg User 🕐 업데이트됨 2026-08-09 📅 생성됨 2026-01-07
292
serpapi/google-search-results-python

Google 검색 결과 via SERP API pip Python 패키지

serpapi
⭐ 762 Python 👤 serpapi Organization 🕐 업데이트됨 2026-08-18 📅 생성됨 2018-01-10
293
python-mechanize/mechanize

python-mechanize 프로젝트의 공식 소스 코드

python-mechanize
⭐ 760 Python 👤 python-mechanize Organization 🕐 업데이트됨 2026-11-16 📅 생성됨 2017-03-08
294
andybalholm/cascadia

Go 언어의 CSS 선택자 라이브러리

andybalholm
⭐ 760 Go 👤 andybalholm User 🕐 업데이트됨 2026-11-12 📅 생성됨 2015-03-28
295
oxylabs/web-scraping-google-sheets

기본 웹 스크래핑을 위한 Google Sheets 사용 가이드

oxylabs
⭐ 757 👤 oxylabs Organization 🕐 업데이트됨 2026-11-18 📅 생성됨 2022-11-14
296
1broseidon/ketch

웹 검색 및 스크래핑을 위한 빠르고 상태 비저장 방식의 CLI. AI 에이전트를 위해 설계되었습니다.

1broseidon
⭐ 756 Go 👤 1broseidon User 🕐 업데이트됨 2026-11-19 📅 생성됨 2026-03-25
297
4ier/neo

어떤 웹 앱이든 API로 변환하세요. Chrome 확장 프로그램이 브라우저 트래픽을 캡처하고, 스키마를 자동 생성하며, AI가 API를 직접 재생할 수 있게 합니다. 공식 API 불필요.

4ier
⭐ 756 JavaScript 👤 4ier User 🕐 업데이트됨 2026-04-28 📅 생성됨 2025-11-03
298
developersdigest/llm-api-engine

AI 기반 API를 몇 초 만에 작성 및 배포

developersdigest
⭐ 755 TypeScript 👤 developersdigest User 🕐 업데이트됨 2025-02-03 📅 생성됨 2025-01-24
299
jshemas/openGraphScraper

Open Graph 정보 및 기타를 위한 Node.js 스크래퍼 서비스!

jshemas
⭐ 754 TypeScript 👤 jshemas User 🕐 업데이트됨 2026-10-30 📅 생성됨 2013-09-01
300
FreshRSS/Extensions

모든 공식 FreshRSS 확장 기능을 포함하는 리포지토리

FreshRSS
⭐ 751 PHP 👤 FreshRSS Organization 🕐 업데이트됨 2026-11-19 📅 생성됨 2015-01-08