#web-scraping Dépôts
382 dépôts au total
Amazon Nova Act est un service AWS destiné à la création et au déploiement à grande échelle d'agents d'IA hautement fiables qui automatisent les flux de travail basés sur l'interface utilisateur (UI).
Une version compatible avec Python 3 de goose http://goose3.readthedocs.io/en/latest/index.html
Un outil en ligne de commande et une API pour récupérer des données de Twitter gratuitement !
Accédez programmatiquement à vos données de suivi des repas stockées dans MyFitnessPal
Invisible Playwright MCP : serveur Playwright MCP indétectable par les systèmes antibots et les CAPTCHA : un agent d’IA navigue sur le Web avec Firefox furtif et anti-détection, Python, l’automatisation de navigateur indétectable, le scraping et l’utilisation de l’ordinateur.
⭐️ Un téléchargeur mignon et têtu pour audio d'albums Himalaya sans limitation O(∩_∩)O
Un outil pour le basculement de pool de proxys en recherchant des proxys SOCKS5 ouverts avec Fofa
Incendie à Hong Kong (Tai Po, 26/11) : Un brasier majeur a ravagé Wang Fuk Court
tailwindui-crawler télécharge les fichiers HTML des composants localement
Une bibliothèque Ruby polyvalente pour le web scraping qui peut crawler un site, plusieurs domaines, certains liens ou indéfiniment. Spidr est conçu pour être rapide et facile à utiliser.
Logiciel d'enregistrement automatique de streaming en direct multiplateforme basé sur Electron, prend en charge Douyin/Kuaishou sous forme de liens multiples
Un pilote de navigateur Web programmable et intégrable, compatible avec la spécification Selenium WebDriver -- sans tête, basé sur WebKit, Java pur
Moteur Chromium furtif qui empêche les scrapers et les agents de navigateur d’être bloqués grâce à une seule modification de ligne de code.
Version NodeJS non détectée de la bibliothèque de tests et d'automatisation Playwright.
Guide de sélection des navigateurs à empreinte numérique (navigateurs anti-association / anti-détection / Antidetect Browser) et des adresses IP proxy résidentielles, accompagné d’un récapitulatif de ressources open source : tarifs de 27 navigateurs à empreinte numérique majeurs et de 28 fournisseurs de proxys, avec des informations sur la personnalisation des empreintes Chromium, Camoufox, Patchright, l’automatisation anti-détection et les outils de détection d’empreintes.
Intègre les sources Xiangse Guguan existantes sur le Web, le robot d'exploration met à jour automatiquement les sources de livres chaque semaine
Un Selenium invisible aux systèmes anti-bots, donc sans CAPTCHA : même API, Firefox headless furtif et anti-détection, empreinte numérique indétectable, contournement de la détection des bots, scraping web et automatisation du navigateur en Python.
Le classement des tendances Weibo enregistre les recherches populaires sur Weibo à partir du 24 novembre 2020. Les données sont collectées toutes les heures et archivées quotidiennement.
Utilisez Cloudflare pour créer des proxys HTTP de passage pour une rotation IP unique, similaire à fireprox
Empilez visuellement des blocs pour créer des flux de travail complexes dans le navigateur et exécutez-les via l’API
Extraire les métadonnées de films XBMC et Kodi et renommer automatiquement les fichiers pour les vidéos pour adultes japonaises (JAV), les DVD pour adultes américains et le contenu Web pour adultes américains.
Panneau Qinglong, rejoindre, Banu Hot Pot, FAW-Volkswagen, Haidilao, Watsons, Bawang Tea Master, Huazhu Club, Dongcheng Club, Wanda Hotels, Yihetang Check-in automatique. Surveillance des stocks et des changements de prix sur la boutique DJI
Enregistre le classement des tendances TikTok, le classement des stars, le classement des diffusions en direct, le classement musical et le classement des marques, mis à jour toutes les heures, archivé quotidiennement.
Proxys résidentiels, de datacenter, d’ISP et mobiles avec plus de 90 millions d’adresses IP dans plus de 200 pays, ainsi que des API de scraping et SERP. Exemples de code en Python, Node.js, PHP, Go, Java, C#, Ruby et curl.
Un outil d'analyse et de traitement de flux vidéo réseau pour CCTV.com
LittleCrawler (小爬虫) prend en charge l'extraction d'informations publiques sur les plateformes Xiaohongshu (xhs), Zhihu et XianYu.
Résultats de recherche Google via SERP API pip Package Python
Guide pour utiliser Google Sheets pour le scraping web de base
CLI rapide et sans état pour effectuer des recherches et extraire du contenu sur le Web. Conçu pour les agents d’IA.
Transformez n'importe quelle application web en API. L'extension Chrome capture le trafic du navigateur, génère automatiquement des schémas et permet à l'IA de rejouer les API directement. Aucune API officielle requise.
Créez et déployez des API alimentées par l'IA en quelques secondes
Service de scraping Node.js pour les informations Open Graph et plus encore !