#data-extraction 저장소
#data-extraction 태그가 지정된 GitHub의 활성 오픈 소스 저장소 131개를 확인해 보세요. 총 729,329개의 스타를 획득했으며 프로젝트당 평균 5,567개입니다. 이 주제를 이끄는 저장소는 205,758개의 스타를 받은 firecrawl/firecrawl입니다.
저장소 총 131개
에이전트를 더 똑똑하게 만드는 지식 인프라입니다. 하나의 API를 통해 550개 이상의 데이터 제공업체를 검색하고, 스크래핑하고, 액세스하세요.
🕷️ 단일 요청부터 대규모 크롤링까지 모든 작업을 처리하는 최고의 웹 스크래핑 프레임워크! 망설이지 말고 여기에서 참여하세요: https://discord.gg/EMgGbDceNQ 매일 유용한 팁과 요령을 보려면 여기에서 팔로우하세요: https://x.com/Scrapling_dev
공식 Crawl4AI Cloud: AI 에이전트를 위한 호스팅형 웹 스크래핑·추출·검색 API입니다. API 키는 무료이며 매월 1,000크레딧이 제공되고, 카드 등록도 필요 없습니다. 완전한 오픈 소스입니다. 이 저장소에는 서비스를 구동하는 Apache-2.0 크롤러가 포함되어 있으며, 직접 호스팅할 수도 있습니다.
웹상의 모든 사이트에서 데이터를 추출하고 상호작용할 수 있는 SDK입니다. Claude Code, Codex, Eve, Mastra 등으로 시작해 보세요.
AI 에이전트를 위해 구축된 브라우저 자동화 CLI. 안티봇 장벽을 돌파하고, 막힐 때 여러 플랫폼에서 인간에게 전환합니다. 병렬 멀티태스크 실행, 독립적인 멀티세션 운영, 격리된 멀티계정 브라우징.
Undetected-Chromedriver의 후속 버전. Captcha / CloudFlare / Imperva / hCaptcha와 같은 성가신 봇 방지 시스템으로 인해 일반적으로 방해받는 웹 자동화, 웹 스크래핑, 봇 및 기타 모든 창의적인 아이디어를 위한 매우 빠른 프레임워크를 제공합니다.
Python을 사용한 웹 스크래핑 책의 코드 샘플 http://shop.oreilly.com/product/0636920034391.do
메시징 플랫폼을 위한 에이전트형 정보 추출 도구입니다. Noria는 채팅을 통해 메시지와 URL을 받고, 웹 데이터를 수집해 맞춤형 평가 기준(예: 채용 정보, 장학금)에 따라 콘텐츠를 평가한 뒤, 계산된 적합도 점수가 포함된 구조화된 요약을 지정된 메신저 번호로 직접 전송합니다.
WebCollector는 Java 기반의 오픈 소스 웹 크롤러 프레임워크입니다. 웹을 크롤링하기 위한 몇 가지 간단한 인터페이스를 제공하며, 5분 이내에 멀티스레드 웹 크롤러를 설정할 수 있습니다.
감지되지 않는 자체 호스팅형 브라우저 자동화 플랫폼. Camoufox(Firefox)로 0% 탐지율을 달성했습니다. 속도, 프라이버시 및 확장성을 위해 제작되었습니다.
이 도구는 Windows 11의 Recall 기능에서 데이터를 추출하고 표시하여 PC 활동 스냅샷에 대한 정보에 쉽게 액세스할 수 있도록 합니다.
"치타이-고로드(Chitai-Gorod)" 카탈로그용 지능형 파서. ISBN부터 할인 동향에 이르기까지, 지정된 모든 매개변수에 기반한 고속 데이터 수집 및 구조화.
간체 중국어 문자열에서 성, 시, 구를 추출하고 매핑, 검증 및 간단한 도식을 수행할 수 있는 Python 모듈
원본 PDF의 레이아웃을 유지하면서 PDF 파일을 텍스트 파일로 변환합니다. 예를 들어 PDF 파일의 표에서 내용을 추출할 때 유용합니다. Apache PDFBox 라이브러리의 PDFTextStripper 클래스 하위 클래스입니다.
자주 묻는 질문
GitHub에서 가장 인기 있는 #data-extraction 저장소는 무엇인가요?
GitHub에서 가장 높은 순위의 오픈 소스 #data-extraction 프로젝트는 205,758개의 스타를 받은 firecrawl/firecrawl입니다. 에이전트를 더 똑똑하게 만드는 지식 인프라입니다. 하나의 API를 통해 550개 이상의 데이터 제공업체를 검색하고, 스크래핑하고, 액세스하세요.
#data-extraction 저장소에서 가장 많이 사용되는 프로그래밍 언어는 무엇인가요?
GitHub에서 순위가 가장 높은 #data-extraction 프로젝트 중 가장 일반적으로 사용되는 프로그래밍 언어는 Python, TypeScript, JavaScript, Rust입니다.
#data-extraction 저장소 순위는 어떻게 계산되나요?
#data-extraction 태그가 지정된 활성 오픈 소스 저장소(131개, 스타 500개 이상)를 추적하고 있습니다. 총 스타 수는 729,329개이며 저장소당 평균 5,567개입니다. 순위는 GitHub API를 통해 매일 업데이트됩니다.