Git Stars Git Stars

#webscraping リポジトリ

#webscrapingのタグが付いた、GitHub上の50件のアクティブなオープンソースリポジトリをご覧ください。合計スター数は581,593個で、プロジェクトあたりの平均は11,631個です。このトピックをリードしているのは、205,758個のスターを獲得しているfirecrawl/firecrawlです。

50
リポジトリ総数
581,593
合計スター数
11,631
リポジトリあたりの平均スター数

リポジトリ合計50件

1
firecrawl/firecrawl

エージェントをより賢くするためのナレッジインフラストラクチャ。1つのAPIで、550以上のデータプロバイダーを検索、スクレイピング、利用できます。

firecrawl
⭐ 205,758 TypeScript 👤 firecrawl Organization 🕐 更新日時 2026-11-21 📅 作成日 2024-04-15
2
D4Vinci/Scrapling

🕷️ 1件のリクエストから大規模なクロールまで、あらゆる用途に対応する最高のウェブスクレイピングフレームワーク!遠慮せずにこちらから参加してください:https://discord.gg/EMgGbDceNQ 毎日のヒントや便利なテクニックはこちらをフォロー:https://x.com/Scrapling_dev

D4Vinci
⭐ 104,760 Python 👤 D4Vinci User 🕐 更新日時 2026-11-17 📅 作成日 2024-10-13
3
huginn/huginn

あなたを代表して監視し行動するエージェントを作成します。あなたのエージェントが待機中です!

huginn
⭐ 50,601 Ruby 👤 huginn Organization 🕐 更新日時 2026-11-21 📅 作成日 2013-03-10
4
CloakHQ/CloakBrowser

あらゆるボット検出テストをクリアするステルス版 Chromium。ソースコードレベルのフィンガープリントパッチを備え、Playwright をそのまま置き換えられます。50 件以上のテストに合格。

CloakHQ
⭐ 33,007 Python 👤 CloakHQ Organization 🕐 更新日時 2026-11-20 📅 作成日 2026-02-22
5
ScrapeGraphAI/Scrapegraph-ai

AIベースのPythonスクレイパー

ScrapeGraphAI
⭐ 32,877 Python 👤 ScrapeGraphAI Organization 🕐 更新日時 2026-10-06 📅 作成日 2024-01-27
6
assafelovic/gpt-researcher

任意のLLMプロバイダーを使用して任意のデータに対して深い研究を行う自律型エージェント

assafelovic
⭐ 30,810 Python 👤 assafelovic User 🕐 更新日時 2026-11-12 📅 作成日 2023-05-12
7
getmaxun/maxun

あらゆるウェブサイトを構造化APIに変換。ウェブ上の情報を抽出、自動化、検索、監視できます。

getmaxun
⭐ 18,538 TypeScript 👤 getmaxun Organization 🕐 更新日時 2026-11-20 📅 作成日 2023-10-23
8
pystardust/ani-cli

アニメを閲覧・再生するCLIツール

pystardust
⭐ 14,142 Shell 👤 pystardust User 🕐 更新日時 2026-11-20 📅 作成日 2021-06-09
9
daijro/camoufox

🦊 アンチ検出ブラウザ

daijro
⭐ 13,533 C 👤 daijro User 🕐 更新日時 2026-11-19 📅 作成日 2024-07-26
10
lorien/awesome-web-scraping

ウェブスクレイピングとデータ処理のためのライブラリ、ツール、APIのリスト。

lorien
⭐ 8,242 JavaScript 👤 lorien User 🕐 更新日時 2026-11-21 📅 作成日 2015-08-12
11
alirezamika/autoscraper

Python 用のスマート、自動、高速、軽量な Web スクレイパー

alirezamika
⭐ 8,102 Python 👤 alirezamika User 🕐 更新日時 2026-07-29 📅 作成日 2020-08-31
12
Kaliiiiiiiiii-Vinyzu/patchright

Playwright テストおよび自動化ライブラリの未検出バージョンです。

Kaliiiiiiiiii-Vinyzu
⭐ 5,227 TypeScript 👤 Kaliiiiiiiiii-Vinyzu Organization 🕐 更新日時 2026-11-13 📅 作成日 2023-11-07
13
niespodd/browser-fingerprinting

利用可能な対策 🚿 によるボット保護システムの分析。ウェブスクレイピング時にアンチボットシステム 👻 を無効にし、ブラウザのフィンガープリンティングスクリプト 🕵️‍♂️ を回避する方法は?

niespodd
⭐ 5,171 JavaScript 👤 niespodd User 🕐 更新日時 2026-07-27 📅 作成日 2021-01-23
14
jaypyles/Scraperr

セルフホスト型Webスクレイパー。

jaypyles
⭐ 4,876 TypeScript 👤 jaypyles User 🕐 更新日時 2025-10-12 📅 作成日 2024-07-06
15
itsOwen/CyberScraper-2077

LLM搭載の強力なWebスクレイパー | OpenAI, Gemini & Ollama

itsOwen
⭐ 3,302 Python 👤 itsOwen User 🕐 更新日時 2026-10-12 📅 作成日 2024-08-17
16
GodsScion/Auto_job_applier_linkedIn

この自動応募ツールで応募プロセスを自動化し、求職活動を簡単に行いましょう。

GodsScion
⭐ 3,049 Python 👤 GodsScion User 🕐 更新日時 2026-11-08 📅 作成日 2023-06-17
17
oss-invisible/playwright

見えない Playwright:アンチボットシステムから検出されない Playwright。だから CAPTCHA もありません。同じ API、検出回避機能を備えたステルス型ヘッドレス Firefox、検出されないフィンガープリント、ボット検出の回避、Python によるウェブスクレイピングとブラウザー自動化。

oss-invisible
⭐ 2,612 Python 👤 oss-invisible Organization 🕐 更新日時 2026-11-21 📅 作成日 2026-05-13
18
scrapoxy/scrapoxy

Scrapoxyは廃止されました。

scrapoxy
⭐ 2,402 👤 scrapoxy User 🕐 更新日時 2026-02-07 📅 作成日 2015-08-28
19
anaskhan96/soup

Go言語で書かれたWebスクレイパー、BeautifulSoupに類似

anaskhan96
⭐ 2,302 Go 👤 anaskhan96 User 🕐 更新日時 2026-10-24 📅 作成日 2017-02-23
20
reworkd/tarsier

Webインタラクションエージェントのためのビジョンユーティリティ 👀

reworkd
⭐ 1,746 Jupyter Notebook 👤 reworkd Organization 🕐 更新日時 2024-11-25 📅 作成日 2023-11-09
21
ProxyShard/ShardBrowser

ウェブスクレイピングとマルチアカウント運用向けの、無料・オープンソースのアンチ検知ブラウザランチャー。ShardXチーム(旧ProxyShard)による開発。Chromium 158でエンジンレベルのフィンガープリント偽装(WebGL / WebGPU / Client Hints / フォント / TLS)を実現し、220種類以上のデバイスプロファイルを同梱。SOCKS5経由で安定したQUIC + WebRTCに対応。

ProxyShard
⭐ 1,735 TypeScript 👤 ProxyShard User 🕐 更新日時 2026-11-21 📅 作成日 2026-05-30
22
TheWebScrapingClub/webscraping-from-0-to-hero

Python を使用した Web スクレイピングに関する知識と経験を共有することを目的とした Web スクレイピングのオープンプロジェクトリポジトリです。

TheWebScrapingClub
⭐ 1,695 👤 TheWebScrapingClub Organization 🕐 更新日時 2024-05-27 📅 作成日 2022-05-26
23
zohaibbashir/Google-Maps-Scrapper

このコードは、Google Mapsからのウェブスクレイピングとデータ抽出を行うために使用されます。特に、ビジネスに関する情報(名前、住所、ウェブサイト、電話番号、レビューなど)を取得するために設計されています。

zohaibbashir
⭐ 1,651 Python 👤 zohaibbashir User 🕐 更新日時 2026-05-18 📅 作成日 2023-10-17
24
Kaliiiiiiiiii-Vinyzu/patchright-python

Playwright テストおよび自動化ライブラリの検出されていない Python バージョン。

Kaliiiiiiiiii-Vinyzu
⭐ 1,603 Python 👤 Kaliiiiiiiiii-Vinyzu Organization 🕐 更新日時 2026-11-10 📅 作成日 2024-11-02
25
requests-cache/requests-cache

Python requests 用の永続的な HTTP キャッシュ

requests-cache
⭐ 1,511 Python 👤 requests-cache Organization 🕐 更新日時 2026-11-20 📅 作成日 2012-04-12
26
cdpdriver/zendriver

ultrafunkamsterdam/nodriver に基づいた、非常に高速で、非同期優先、検出不可能な Web スクレイピング/Web オートメーション フレームワーク。Docker サポートも追加されました!

cdpdriver
⭐ 1,483 Python 👤 cdpdriver Organization 🕐 更新日時 2026-11-21 📅 作成日 2024-10-19
27
m8sec/CrossLinked

検索エンジンのスクレイピングを通じて組織から有効な従業員名を抽出するためのLinkedIn列挙ツール

m8sec
⭐ 1,455 Python 👤 m8sec User 🕐 更新日時 2024-11-26 📅 作成日 2019-05-16
28
jamesturk/scrapeghost

👻 OpenAIのGPT APIを使用してWebサイトをスクレイピングするための実験的なライブラリです。

jamesturk
⭐ 1,439 Python 👤 jamesturk User 🕐 更新日時 2026-01-14 📅 作成日 2023-03-18
29
feder-cr/invisible_puppeteer

アンチボットシステムに検出されないPython向けPuppeteer。CAPTCHAも表示されません。同じAPI、検出回避機能を備えたステルス型ヘッドレスFirefox、検出されないフィンガープリント、ボット検出の回避、ウェブスクレイピング、ブラウザー自動化に対応。

feder-cr
⭐ 1,403 Python 👤 feder-cr User 🕐 更新日時 2026-10-19 📅 作成日 2024-09-01
30
raznem/parsera

LLMを用いたウェブサイトスクレイピングのための軽量ライブラリ

raznem
⭐ 1,372 Python 👤 raznem User 🕐 更新日時 2025-12-17 📅 作成日 2024-08-12
31
mov-cli/mov-cli

ターミナルからすべてを視聴します。

mov-cli
⭐ 1,313 Python 👤 mov-cli Organization 🕐 更新日時 2025-10-05 📅 作成日 2022-03-11
32
ovobrowsersupport/ovobrowser

ソースコードレベルの Chromium フィンガープリント・エンジン。検出サイトでは通常の Chrome として評価されます。ボット検出テストを通過する、ソースコードレベルの Chromium フィンガープリント・カーネルです。JS インジェクションではなく、バイナリにコンパイルされた C++ パッチです。

ovobrowsersupport
⭐ 1,277 👤 ovobrowsersupport User 🕐 更新日時 2026-11-16 📅 作成日 2026-08-23
33
scrapfly/scrapfly-scrapers

80以上の人気ドメインに対応する、スケーラブルなPythonウェブスクレイピングスクリプト

scrapfly
⭐ 1,133 Python 👤 scrapfly Organization 🕐 更新日時 2026-11-21 📅 作成日 2023-05-22
34
openzim/zimit

あらゆるウェブサイトからZIMファイルを作成し、オフラインでサーフィンしましょう!

openzim
⭐ 872 Python 👤 openzim Organization 🕐 更新日時 2026-11-18 📅 作成日 2016-06-21
35
oss-invisible/playwright_mcp

Invisible Playwright MCP:ボット対策やCAPTCHAに検出されないPlaywright MCPサーバー。AIエージェントが、検出回避型のステルスFirefox、Python、検出されにくいブラウザー自動化、スクレイピング、コンピューター操作を使ってウェブを閲覧します。

oss-invisible
⭐ 869 Python 👤 oss-invisible Organization 🕐 更新日時 2026-11-20 📅 作成日 2026-09-29
36
vil/H4X-Tools

OSINT、レコンニサンス、スクレイピングのためのモジュラー型ターミナルベースツールキット - Pythonで構築され、LinuxとWindowsで動作します。

vil
⭐ 857 Python 👤 vil User 🕐 更新日時 2026-10-17 📅 作成日 2022-04-18
37
wodsuz/EasyApplyJobsBot

あなたの好みに基づいて、LinkedIn、Glassdoorなどの「簡単応募」求人に自動的に応募するPythonボットです。自動ログイン、追加の質問への自動入力、自動応募!

wodsuz
⭐ 838 Python 👤 wodsuz User 🕐 更新日時 2026-05-18 📅 作成日 2021-08-09
38
benibela/xidel

HTML/XML ページや JSON-API からデータをダウンロードして抽出するためのコマンドラインツールで、CSS、XPath 3.0、XQuery 3.0、JSONiq またはパターンマッチングを使用します。また、新しいまたは変換された XML/HTML/JSON ドキュメントを作成することもできます。

benibela
⭐ 836 Pascal 👤 benibela User 🕐 更新日時 2025-02-22 📅 作成日 2015-06-11
39
tiliondev/fortress

1行のコード変更だけで、スクレイパーやブラウザエージェントのブロックを防ぐステルス Chromium エンジン。

tiliondev
⭐ 817 Python 👤 tiliondev Organization 🕐 更新日時 2026-11-03 📅 作成日 2026-07-02
40
Kaliiiiiiiiii-Vinyzu/patchright-nodejs

Playwrightテストおよび自動化ライブラリの未検出のNodeJSバージョン。

Kaliiiiiiiiii-Vinyzu
⭐ 813 TypeScript 👤 Kaliiiiiiiiii-Vinyzu Organization 🕐 更新日時 2026-11-10 📅 作成日 2024-11-02
41
Skallwar/suckit

InTernetを吸う

Skallwar
⭐ 812 Rust 👤 Skallwar User 🕐 更新日時 2026-03-12 📅 作成日 2019-10-29
42
feder-cr/invisible_selenium

アンチボットシステムに検知されないSeleniumだから、CAPTCHA不要:同じAPI、検知回避機能を備えたステルス型ヘッドレスFirefox、検知されないフィンガープリント、ボット検知の回避、Pythonによるウェブスクレイピングとブラウザー自動化。

feder-cr
⭐ 808 Python 👤 feder-cr User 🕐 更新日時 2026-10-19 📅 作成日 2024-08-16
43
hitarth-gg/zenshin

🔖 Web & Electronベースのアニメストリーミングアプリ for 🐈s

hitarth-gg
⭐ 784 JavaScript 👤 hitarth-gg User 🕐 更新日時 2026-05-24 📅 作成日 2024-08-14
44
ZacharyHampton/HomeHarvest

不動産データスクレイピング用Pythonパッケージ

ZacharyHampton
⭐ 764 Python 👤 ZacharyHampton User 🕐 更新日時 2025-12-26 📅 作成日 2023-09-15
45
z0m31en7/Uscrapper

Uscrapper Vanta: この強力なオープンソースツールで、より深くウェブを探索しましょう。サーフェスウェブとディープウェブの両方のソースから、貴重な洞察を簡単かつ効率的に抽出します。Vantaの高度な機能で、データマイニングと分析を強化しましょう。高速、信頼性、使いやすさを備えたUscrapper Vantaは、研究者とアナリストにとって究極の選択肢です。

z0m31en7
⭐ 740 Python 👤 z0m31en7 User 🕐 更新日時 2024-11-24 📅 作成日 2023-05-31
46
ScrapeGraphAI/scrapecraft

視覚的なワークフロービルダーを備えた AI 駆動のウェブスクレイピングエディター。自然言語を使用してウェブスクレイパーを構築、テスト、デプロイします。ScrapeGraphAI および LangGraph を搭載。

ScrapeGraphAI
⭐ 731 Python 👤 ScrapeGraphAI Organization 🕐 更新日時 2025-12-26 📅 作成日 2025-07-01
47
scrapfly/Antibot-Detector

アンチボットシステム、CAPTCHA、フィンガープリンティング技術をリアルタイムで検出します。Cloudflare、Akamai、DataDome、reCAPTCHA、hCaptcha、Shape Security などを識別し、信頼度スコアと高度なキャプチャツールを提供します。

scrapfly
⭐ 636 JavaScript 👤 scrapfly Organization 🕐 更新日時 2026-11-17 📅 作成日 2025-09-03
48
adrianhajdin/pricewise

単一のビデオでWebスクレイピングに飛び込み、Next.js 13のeコマース価格トラッカーを構築しましょう。このビデオでは、データスクレイピング、cronジョブ、メール送信、デプロイなどを学びます。

adrianhajdin
⭐ 583 TypeScript 👤 adrianhajdin User 🕐 更新日時 2024-07-06 📅 作成日 2023-09-29
49
jpjacobpadilla/Stealth-Requests

Pythonでの検知されないWebスクレイピングとシームレスなHTML解析!

jpjacobpadilla
⭐ 570 Python 👤 jpjacobpadilla User 🕐 更新日時 2026-09-19 📅 作成日 2024-08-04
50
oxylabs/oxylabs-ai-studio-openclaw

Oxylabs AI-Studio公式Openclawプラグイン

oxylabs
⭐ 549 TypeScript 👤 oxylabs Organization 🕐 更新日時 2026-09-16 📅 作成日 2026-02-26

よくある質問

1

GitHubで最も人気のある#webscrapingリポジトリは何ですか?

GitHubで最も上位にランクインしているオープンソースの#webscrapingプロジェクトは、205,758個のスターを獲得しているfirecrawl/firecrawlです。エージェントをより賢くするためのナレッジインフラストラクチャ。1つのAPIで、550以上のデータプロバイダーを検索、スクレイピング、利用できます。

2

#webscrapingリポジトリで最もよく使われているプログラミング言語は何ですか?

GitHubで上位にランクインしている#webscrapingプロジェクトでは、Python, TypeScript, JavaScript, Rubyが最も一般的なプログラミング言語です。

3

#webscrapingリポジトリのランキングはどのように算出されていますか?

#webscrapingのタグが付いた50件のアクティブなオープンソースリポジトリ(スター500個以上)を追跡しています。合計スター数は581,593個で、リポジトリあたりの平均は11,631個です。ランキングはGitHub APIからのデータに基づいて毎日更新されます。