Git Stars Git Stars

#web-scraper 저장소

#web-scraper 태그가 지정된 GitHub의 활성 오픈 소스 저장소 36개를 확인해 보세요. 총 565,282개의 스타를 획득했으며 프로젝트당 평균 15,702개입니다. 이 주제를 이끄는 저장소는 205,758개의 스타를 받은 firecrawl/firecrawl입니다.

36
총 리포지토리
565,282
총 별점
15,702
리포지토리당 평균 스타 수

저장소 총 36개

1
firecrawl/firecrawl

에이전트를 더 똑똑하게 만드는 지식 인프라입니다. 하나의 API를 통해 550개 이상의 데이터 제공업체를 검색하고, 스크래핑하고, 액세스하세요.

firecrawl
⭐ 205,758 TypeScript 👤 firecrawl Organization 🕐 업데이트됨 2026-11-21 📅 생성됨 2024-04-15
2
Panniantong/Agent-Reach

AI 에이전트에게 인터넷 전체를 볼 수 있는 시야를 부여하세요. Twitter, Reddit, YouTube, GitHub, Bilibili, XiaoHongShu 를 읽고 검색하세요 — CLI 하나, API 사용료 0.0.0

Panniantong
⭐ 113,683 Python 👤 Panniantong User 🕐 업데이트됨 2026-11-08 📅 생성됨 2026-02-24
3
D4Vinci/Scrapling

🕷️ 단일 요청부터 대규모 크롤링까지 모든 작업을 처리하는 최고의 웹 스크래핑 프레임워크! 망설이지 말고 여기에서 참여하세요: https://discord.gg/EMgGbDceNQ 매일 유용한 팁과 요령을 보려면 여기에서 팔로우하세요: https://x.com/Scrapling_dev

D4Vinci
⭐ 104,760 Python 👤 D4Vinci User 🕐 업데이트됨 2026-11-17 📅 생성됨 2024-10-13
4
ScrapeGraphAI/Scrapegraph-ai

AI 기반 Python 스크래퍼

ScrapeGraphAI
⭐ 32,877 Python 👤 ScrapeGraphAI Organization 🕐 업데이트됨 2026-10-06 📅 생성됨 2024-01-27
5
lexmount/moli

AI 에이전트를 위한 최고의 헤드리스 브라우저. 가볍고 빠르며 높은 호환성. Rust로 구축

lexmount
⭐ 24,190 Rust 👤 lexmount Organization 🕐 업데이트됨 2026-11-21 📅 생성됨 2026-08-10
6
getmaxun/maxun

모든 웹사이트를 구조화된 API로 변환하세요. 웹을 추출하고, 자동화하고, 검색하고, 모니터링하세요.

getmaxun
⭐ 18,538 TypeScript 👤 getmaxun Organization 🕐 업데이트됨 2026-11-20 📅 생성됨 2023-10-23
7
gosom/google-maps-scraper

Google Maps에서 데이터 스크래핑. 각 장소에 대한 이름, 주소, 전화번호, 웹사이트 URL, 평점, 리뷰 수, 위도 및 경도, 리뷰, 이메일 등을 추출합니다.

gosom
⭐ 8,291 Go 👤 gosom User 🕐 업데이트됨 2026-11-21 📅 생성됨 2023-04-22
8
BruceDone/awesome-crawler

다양한 언어의 멋진 웹 크롤러, 스파이더 컬렉션

BruceDone
⭐ 7,051 👤 BruceDone User 🕐 업데이트됨 2024-06-16 📅 생성됨 2016-10-10
9
jaypyles/Scraperr

자체 호스팅 웹 스크래퍼.

jaypyles
⭐ 4,876 TypeScript 👤 jaypyles User 🕐 업데이트됨 2025-10-12 📅 생성됨 2024-07-06
10
AhmadHassan-BTed/JinaClip

전문가급 로컬 우선 브라우저 확장 프로그램으로, 브라우저 실행 환경 내에서만 모든 웹페이지를 충실도 높은 LLM 친화적 Markdown으로 변환합니다. 클라우드를 사용하지 않고 개인정보 보호를 중시하며, AI 워크플로에 맞춰 특별히 설계되었습니다.

AhmadHassan-BTed
⭐ 4,160 JavaScript 👤 AhmadHassan-BTed User 🕐 업데이트됨 2026-11-09 📅 생성됨 2026-05-16
11
oxylabs/google-ai-mode-scraper

차단 없이 Google AI 모드 응답을 대규모로 스크랩하세요.

oxylabs
⭐ 3,619 Java 👤 oxylabs Organization 🕐 업데이트됨 2026-11-18 📅 생성됨 2025-09-08
12
arpit-omprakash/100ProjectsOfCode

실용적인 지식 구축 프로젝트 목록입니다.

arpit-omprakash
⭐ 3,548 👤 arpit-omprakash User 🕐 업데이트됨 2024-04-12 📅 생성됨 2020-10-05
13
itsOwen/CyberScraper-2077

LLM 기반의 강력한 웹 스크레이퍼 | OpenAI, Gemini & Ollama

itsOwen
⭐ 3,302 Python 👤 itsOwen User 🕐 업데이트됨 2026-10-12 📅 생성됨 2024-08-17
14
php-curl-class/php-curl-class

PHP Curl Class는 HTTP 요청을 보내고 웹 API와 통합하는 것을 쉽게 만들어줍니다.

php-curl-class
⭐ 3,293 PHP 👤 php-curl-class Organization 🕐 업데이트됨 2026-11-17 📅 생성됨 2013-08-16
15
oxylabs/how-to-scrape-amazon-product-data

Python을 사용하여 Amazon에서 제품 데이터(제목, 평점, 가격, 이미지 및 설명 포함)를 추출하는 과정.

oxylabs
⭐ 3,248 Python 👤 oxylabs Organization 🕐 업데이트됨 2026-11-18 📅 생성됨 2024-09-03
16
spider-rs/spider

Rust를 활용한 기반 저지연 웹 데이터 수집

spider-rs
⭐ 2,856 Rust 👤 spider-rs Organization 🕐 업데이트됨 2026-11-20 📅 생성됨 2018-01-07
17
lncrawl/lightnovel-crawler

온라인 소스에서 전자책을 생성하고 다운로드합니다.

lncrawl
⭐ 2,717 Python 👤 lncrawl Organization 🕐 업데이트됨 2026-11-11 📅 생성됨 2018-01-17
18
anaskhan96/soup

Go로 작성된 웹 스크레이퍼, BeautifulSoup과 유사

anaskhan96
⭐ 2,302 Go 👤 anaskhan96 User 🕐 업데이트됨 2026-10-24 📅 생성됨 2017-02-23
19
oxylabs/how-to-scrape-google-scholar

Python 및 Oxylabs SERP Scraper API를 사용하여 Google Scholar에서 제목, 저자 및 인용을 추출하는 가이드입니다.

oxylabs
⭐ 2,095 Python 👤 oxylabs Organization 🕐 업데이트됨 2026-11-18 📅 생성됨 2024-03-07
20
oxylabs/how-to-scrape-amazon-prices

Python과 Oxylabs E-Commerce Scraper API를 사용하여 Amazon에서 베스트셀러 항목, 검색 결과 및 현재 사용 가능한 거래를 추출하는 코드입니다.

oxylabs
⭐ 2,083 Python 👤 oxylabs Organization 🕐 업데이트됨 2026-11-18 📅 생성됨 2024-03-21
21
gildas-lormeau/single-file-cli

SingleFile 기반으로 완전한 웹페이지를 단일 HTML 파일로 충실하게 복사하여 저장하는 CLI 도구

gildas-lormeau
⭐ 1,702 JavaScript 👤 gildas-lormeau User 🕐 업데이트됨 2026-11-18 📅 생성됨 2022-05-31
22
fastcrw/crw

Rust로 작성된 빠르고 가벼운 Firecrawl/Tavily 대안. AI 에이전트를 위한 MCP 서버가 포함된 웹 스크레이퍼, 크롤러 및 검색 API. Firecrawl 호환 드롭인 API(/scrape, /crawl, /search) 제공. 1K URL 벤치마크에서 Tavily보다 2.3배, Firecrawl보다 1.5배 빠름. 6MB RAM, 단일 바이너리. 자체 호스팅 또는 관리형 클라우드 사용 가능.

fastcrw
⭐ 1,284 Rust 👤 fastcrw Organization 🕐 업데이트됨 2026-11-21 📅 생성됨 2026-03-02
23
dondai44423/donsetch

AI 에이전트를 위한 웹 페치, 검색 및 크롤링. Rust로 기초부터 제작. 키 불필요, 계정 불필요. AGPL v3.

dondai44423
⭐ 1,138 Rust 👤 dondai44423 User 🕐 업데이트됨 2026-11-21 📅 생성됨 2026-08-07
24
juancarlospaco/faster-than-requests

Python 3에서 더 빠른 요청

juancarlospaco
⭐ 1,131 Nim 👤 juancarlospaco User 🕐 업데이트됨 2026-11-19 📅 생성됨 2018-11-13
25
0x676e67/wreq

인체공학적이고 개인정보 보호를 고려한 Rust HTTP 클라이언트

0x676e67
⭐ 1,118 Rust 👤 0x676e67 User 🕐 업데이트됨 2026-11-20 📅 생성됨 2024-09-19
26
oxylabs/ai-scraper-py

AI Scraper는 비교할 수 없는 정밀도로 데이터 추출을 자동화하기 위해 제작된 강력한 스크래핑 도구이자 스크래핑 에이전트입니다. 다양한 웹 소스에서 확장 가능한 AI 스크래핑 작업에 이상적이며, 이 도구는 복잡한 스크래핑 작업을 효율적이고 지능적인 워크플로우로 단순화합니다.

oxylabs
⭐ 1,089 👤 oxylabs Organization 🕐 업데이트됨 2026-04-02 📅 생성됨 2025-09-25
27
postmodern/spidr

다양한 Ruby 웹 스파이더링 라이브러리로, 사이트, 여러 도메인, 특정 링크 또는 무한정 스파이더링할 수 있습니다. Spidr은 빠르고 사용하기 쉬운 디자인입니다.

postmodern
⭐ 835 Ruby 👤 postmodern User 🕐 업데이트됨 2026-01-12 📅 생성됨 2009-03-08
28
cassidoo/scrapers

웹 곳곳의 스크래퍼 목록.

cassidoo
⭐ 723 👤 cassidoo User 🕐 업데이트됨 2025-02-07 📅 생성됨 2016-04-18
29
lumpinif/deepcrawl

100% 무료이며 완전 오픈소스 Firecrawl edge 대안으로, 에이전트를 위한 더 나은 링크 추출 기능 - Cloudflare나 Vercel에 직접 배포할 수 있습니다.

lumpinif
⭐ 704 TypeScript 👤 lumpinif User 🕐 업데이트됨 2026-08-24 📅 생성됨 2025-05-22
30
shaikhsajid1111/social-media-profile-scrapers

소셜 미디어 전반의 사용자 데이터 가져오기

shaikhsajid1111
⭐ 588 Python 👤 shaikhsajid1111 User 🕐 업데이트됨 2026-09-15 📅 생성됨 2020-04-26
31
spekulatius/PHPScraper

PHP용 범용 웹 유틸리티입니다.

spekulatius
⭐ 588 PHP 👤 spekulatius User 🕐 업데이트됨 2026-09-08 📅 생성됨 2020-04-21
32
jaebradley/basketball_reference_web_scraper

Basketball Reference를 통한 NBA 통계 API

jaebradley
⭐ 563 HTML 👤 jaebradley User 🕐 업데이트됨 2026-11-21 📅 생성됨 2015-10-23
33
oxylabs/oxylabs-ai-studio-openclaw

공식 Oxylabs AI-Studio Openclaw 플러그인

oxylabs
⭐ 549 TypeScript 👤 oxylabs Organization 🕐 업데이트됨 2026-09-16 📅 생성됨 2026-02-26
34
oxylabs/quick-start-guide

Oxylabs의 웹 스크래퍼 API 무료 평가판을 최대한 활용하기 위한 Python 빠른 시작 가이드.

oxylabs
⭐ 512 👤 oxylabs Organization 🕐 업데이트됨 2026-06-19 📅 생성됨 2022-03-14
35
AlexMathew/scrapple

준자동 웹 콘텐츠 추출기 제작을 위한 프레임워크

AlexMathew
⭐ 506 Python 👤 AlexMathew User 🕐 업데이트됨 2026-01-16 📅 생성됨 2014-12-13
36
oxylabs/web-scraper-api

실시간 대규모 데이터 추출을 위한 올인원 웹 스크래핑 API입니다. 프록시, CAPTCHA 관리, JavaScript 렌더링 및 파싱을 단일 요청으로 처리하고 HTML 또는 구조화된 JSON을 반환합니다.

oxylabs
⭐ 503 👤 oxylabs Organization 🕐 업데이트됨 2026-10-01 📅 생성됨 2026-06-05

자주 묻는 질문

1

GitHub에서 가장 인기 있는 #web-scraper 저장소는 무엇인가요?

GitHub에서 가장 높은 순위의 오픈 소스 #web-scraper 프로젝트는 205,758개의 스타를 받은 firecrawl/firecrawl입니다. 에이전트를 더 똑똑하게 만드는 지식 인프라입니다. 하나의 API를 통해 550개 이상의 데이터 제공업체를 검색하고, 스크래핑하고, 액세스하세요.

2

#web-scraper 저장소에서 가장 많이 사용되는 프로그래밍 언어는 무엇인가요?

GitHub에서 순위가 가장 높은 #web-scraper 프로젝트 중 가장 일반적으로 사용되는 프로그래밍 언어는 Python, TypeScript, Rust, Go입니다.

3

#web-scraper 저장소 순위는 어떻게 계산되나요?

#web-scraper 태그가 지정된 활성 오픈 소스 저장소(36개, 스타 500개 이상)를 추적하고 있습니다. 총 스타 수는 565,282개이며 저장소당 평균 15,702개입니다. 순위는 GitHub API를 통해 매일 업데이트됩니다.