Git Stars Git Stars

#web-scraping 저장소

381
총 리포지토리
2.1M
총 별점
5,636
리포지토리당 평균 스타 수

저장소 총 382개

351
samacs/simple_html_dom

단순히 Simple HTML DOM 라이브러리의 포크일 뿐입니다. (http://simplehtmldom.sourceforge.net/)

samacs
⭐ 587 HTML 👤 samacs User 🕐 업데이트됨 2024-05-15 📅 생성됨 2012-09-23
352
pcrbot/HoshinoBot-plugins-index

HoshinoBot 플러그인 인덱스

pcrbot
⭐ 581 Python 👤 pcrbot Organization 🕐 업데이트됨 2026-11-16 📅 생성됨 2020-11-13
354
vakra-dev/reader

AI를 위한 오픈 소스 웹 인프라스트럭처. 웹을 스크랩하고, 크롤링하며, 자동화하고, 마크다운을 정리하고, 브라우저 세션을 관리하여 에이전트에 바로 사용할 수 있습니다.

vakra-dev
⭐ 577 TypeScript 👤 vakra-dev Organization 🕐 업데이트됨 2026-10-06 📅 생성됨 2026-01-07
355
JeremiahPetersen/RepoToText

전체 GitHub 리포지토리를 LLM(ChatGPT, Claude, Gemini 등)에 사용할 수 있는 하나의 정리된 .txt 파일로 변환하세요.

JeremiahPetersen
⭐ 576 Python 👤 JeremiahPetersen User 🕐 업데이트됨 2024-05-29 📅 생성됨 2023-07-09
356
realgam3/pymultitor

PyMultitor - Python 멀티스레드 Tor 프록시

realgam3
⭐ 575 Python 👤 realgam3 User 🕐 업데이트됨 2025-08-30 📅 생성됨 2013-09-28
357
firecrawl/firestarter

🔥 RAG 기반 검색, 스트리밍 응답 및 OpenAI 호환 API 엔드포인트로 모든 웹사이트에 대한 AI 챗봇을 즉시 생성하세요

firecrawl
⭐ 571 TypeScript 👤 firecrawl Organization 🕐 업데이트됨 2025-06-18 📅 생성됨 2025-06-13
358
jpjacobpadilla/Stealth-Requests

Python에서의 감지되지 않는 웹 스크래핑 및 원활한 HTML 파싱!

jpjacobpadilla
⭐ 570 Python 👤 jpjacobpadilla User 🕐 업데이트됨 2026-09-19 📅 생성됨 2024-08-04
359
alterem/knowledge-grab

knowledge-grab는 Tauri와 Vue 3를 기반으로 구축된 데스크톱 애플리케이션으로, 사용자가 국가 초중등 스마트 교육 플랫폼(basic.smartedu.cn)에서 다양한 교육 자료를 편리하게 다운로드할 수 있도록 설계되었습니다.

alterem
⭐ 566 Rust 👤 alterem User 🕐 업데이트됨 2026-10-21 📅 생성됨 2025-05-18
360
sentient-engineering/sentient

3줄의 코드로 브라우저 제어 에이전트를 구축할 수 있는 프레임워크/SDK. https://discord.gg/umgnyQU2K8에서 채팅에 참여하세요

sentient-engineering
⭐ 565 Python 👤 sentient-engineering Organization 🕐 업데이트됨 2024-10-10 📅 생성됨 2024-09-01
361
jaebradley/basketball_reference_web_scraper

Basketball Reference를 통한 NBA 통계 API

jaebradley
⭐ 563 HTML 👤 jaebradley User 🕐 업데이트됨 2026-11-21 📅 생성됨 2015-10-23
362
programminghistorian/jekyll

The Programming Historian을 위한 Jekyll 기반 정적 사이트

programminghistorian
⭐ 559 HTML 👤 programminghistorian Organization 🕐 업데이트됨 2026-11-19 📅 생성됨 2013-09-09
363
databay-labs/free-proxy-list

무료 프록시 목록 ✅🚀 HTTP, HTTPS, SOCKS4 & SOCKS5 | 5분마다 업데이트 | 엄격한 SSL, MITM 없음, 다국가

databay-labs
⭐ 557 👤 databay-labs Organization 🕐 업데이트됨 2026-06-20 📅 생성됨 2025-04-25
364
Johell1NS/browser-search

AI 에이전트를 위한 스킬: SearXNG로 웹 검색, Camofox로 브라우징, CloakBrowser로 보안 보호 우회. 설계부터 환각 방지. 자체 호스팅, 무료, 무제한.

Johell1NS
⭐ 549 JavaScript 👤 Johell1NS User 🕐 업데이트됨 2026-10-22 📅 생성됨 2026-06-22
366
strohne/Facepager

Facepager는 YouTube, Twitter 및 기타 웹사이트에서 API와 웹 스크래핑을 기반으로 공개적으로 이용 가능한 데이터를 가져오기 위해 만들어졌습니다.

strohne
⭐ 549 Python 👤 strohne User 🕐 업데이트됨 2026-05-17 📅 생성됨 2012-09-26
367
la-deep-web/Phoneinfoga

전화번호에 대한 데이터를 검색하는 스크립트

la-deep-web
⭐ 548 Python 👤 la-deep-web Organization 🕐 업데이트됨 2024-04-24 📅 생성됨 2019-02-24
368
TomoeMami/S1PlainTextBackup

순수 텍스트 형식의 S1 게시물 백업

TomoeMami
⭐ 547 Python 👤 TomoeMami User 🕐 업데이트됨 2026-11-21 📅 생성됨 2020-02-02
369
AeternaLabsHQ/pullmd

사람과 AI 에이전트를 위한 자체 호스팅 URL·파일 Markdown 변환 서비스입니다. 웹페이지, 문서, 이미지, 오디오, YouTube를 지원합니다. PWA + REST + MCP + Claude Code 스킬을 제공하며 Reddit을 지원하고 공유 링크를 새로 고칠 수 있습니다.

AeternaLabsHQ
⭐ 528 JavaScript 👤 AeternaLabsHQ Organization 🕐 업데이트됨 2026-11-21 📅 생성됨 2026-04-27
370
qxinGitHub/searchEngineJump

여러 엔진 간을 편리하게 이동할 수 있는 검색 엔진 리디렉션 스크립트

qxinGitHub
⭐ 528 JavaScript 👤 qxinGitHub User 🕐 업데이트됨 2026-04-19 📅 생성됨 2017-02-28
371
Johnserf-Seed/TikTokWeb

TikTokTool 웹 버전

Johnserf-Seed
⭐ 527 CSS 👤 Johnserf-Seed User 🕐 업데이트됨 2024-01-26 📅 생성됨 2021-07-18
372
luyu0279/BrainyAI

Sider, Monica, Merlin과 같은 제품에 대한 무료 대안을 제공하는 무료 오픈 소스 브라우저 사이드바 플러그인.

luyu0279
⭐ 526 TypeScript 👤 luyu0279 User 🕐 업데이트됨 2025-04-08 📅 생성됨 2024-06-11
373
KitePig/FatRat-Collect

팡슈 차이지(Pangshu Caiji): 워드프레스용 우수한 오픈 소스 수집 플러그인

KitePig
⭐ 523 PHP 👤 KitePig User 🕐 업데이트됨 2026-06-03 📅 생성됨 2018-12-04
374
n1tr00-10/tiktok-web-signature

TikTok 웹 서명을 리버스 엔지니어링하여 API 요청에 사용할 유효한 TikTok 서명을 생성합니다.

n1tr00-10
⭐ 521 Python 👤 n1tr00-10 User 🕐 업데이트됨 2026-10-09 📅 생성됨 2026-10-09
375
liarjsdev/liarjs-skills

브라우저 지문 테스트를 위한 Agent Skills: Claude Code, Codex, Cursor 또는 Copilot에서 liarjs를 실행하여 브라우저를 자기 자신과 비교해 점수를 매깁니다. Canvas, WebGL, WebGPU, 오디오, 글꼴 및 WebRTC에 대한 40가지 일관성 검사를 수행하고 TLS/HTTP 계층과 교차 검증합니다. Playwright 및 Puppeteer 하네스 QA, CI 회귀 게이트, 헤드리스 브라우저 탐지 트리아지를 지원합니다.

liarjsdev
⭐ 518 👤 liarjsdev User 🕐 업데이트됨 2026-08-06 📅 생성됨 2026-08-04
376
subinps/Instagram-Bot

Instagram에서 거의 모든 것을 다운로드하는 텔레그램 봇

subinps
⭐ 513 Python 👤 subinps User 🕐 업데이트됨 2024-04-30 📅 생성됨 2021-05-31
377
oxylabs/quick-start-guide

Oxylabs의 웹 스크래퍼 API 무료 평가판을 최대한 활용하기 위한 Python 빠른 시작 가이드.

oxylabs
⭐ 512 👤 oxylabs Organization 🕐 업데이트됨 2026-06-19 📅 생성됨 2022-03-14
379
AlexMathew/scrapple

준자동 웹 콘텐츠 추출기 제작을 위한 프레임워크

AlexMathew
⭐ 506 Python 👤 AlexMathew User 🕐 업데이트됨 2026-01-16 📅 생성됨 2014-12-13
380
oxylabs/web-scraper-api

실시간 대규모 데이터 추출을 위한 올인원 웹 스크래핑 API입니다. 프록시, CAPTCHA 관리, JavaScript 렌더링 및 파싱을 단일 요청으로 처리하고 HTML 또는 구조화된 JSON을 반환합니다.

oxylabs
⭐ 503 👤 oxylabs Organization 🕐 업데이트됨 2026-10-01 📅 생성됨 2026-06-05
381
sansan0/bilibili-comment-analyzer

🎯 빌리빌리(bilibili) 댓글 데이터 시각화 분석 소프트웨어 -- 업로더가 자신의 주제 선택을 안내하고 팬 그룹을 명확히 하는 데 사용할 수 있습니다.

sansan0
⭐ 503 Python 👤 sansan0 User 🕐 업데이트됨 2025-06-27 📅 생성됨 2025-06-03