← Tous les connecteursCatalogue Pipedream · Développement web et applications

ScrapingBot

ScrapingBot est une API de scraping web pour extraire du contenu HTML sans blocage annoncé. Elle propose des actions pour demander une extraction, lire le résultat d’un traitement et cibler des pages ou des moteurs de recherche.

Version texte de cette fiche

Connexion à vérifier dans Bruno4 actions0 déclencheurs de référence

Utilisation dans Bruno

Catalogue Pipedream : connexion du compte et droits nécessaires. Les actions réellement utilisables sont vérifiées dans Bruno lors de la connexion. Les déclencheurs sont documentés à titre de référence et ne sont pas activés automatiquement dans Bruno.

Exemples de demandes à Bruno

Ces exemples utilisent des noms et des données fictifs. Pour les essayer, connectez l’application et accordez les accès nécessaires. Bruno vous demandera de valider les actions qui l’exigent.

Demander une extraction sur un réseau social

Je veux lancer une demande de scraping pour la page de l’entreprise Atelier Martin sur un réseau social afin de récupérer les données visibles liées à sa publication.

Résultat attendu

Une requête d’extraction envoyée à ScrapingBot, avec un identifiant de réponse si le service en génère un.

À préciser dans votre demande

  • L’URL ou la cible du réseau social
  • Les données visibles à récupérer
  • Le contexte métier, ici l’entreprise Atelier Martin
Sources de cet exemple

Lire le résultat d’un job de scraping social

Je veux récupérer le résultat du job de scraping associé à responseId 12345 pour le dossier Veille marque afin de vérifier ce qui a été renvoyé.

Résultat attendu

Les données associées au responseId fourni, si le job est disponible côté service.

À préciser dans votre demande

  • Le responseId du job à relire, ici 12345
  • Le nom du dossier ou du cas d’usage, ici Veille marque
  • L’accès au résultat généré par le service
Sources de cet exemple

Extraire des résultats de recherche pour une requête précise

Je veux extraire les résultats Google ou Bing pour la requête catalogue mobilier Atelier Martin afin d’obtenir les liens et extraits visibles.

Résultat attendu

Une extraction ciblée des résultats du moteur de recherche indiqué, selon la requête fournie.

À préciser dans votre demande

  • La requête de recherche à analyser
  • Le moteur visé, Google ou Bing
  • Le contexte métier, ici catalogue mobilier Atelier Martin
Sources de cet exemple

À savoir avant de commencer

  • Les actions portent sur l’extraction et la lecture de résultats, pas sur la gestion du site source.
  • Le retour dépend de la disponibilité du job ou de la page visée.
  • La réponse peut être partielle si le contenu source est restreint ou changeant.
  • Aucun déclencheur n’est documenté dans cette fiche.

Pour connecter cette application

  • Rechercher ScrapingBot dans Apps, puis vérifier la connexion et les droits proposés. Connexion indiquée par Pipedream : clé API.
  • Les actions possibles dépendent de votre compte et des accès accordés. Un abonnement à l’application peut être nécessaire.
  • Bruno demande votre confirmation avant de créer, modifier ou supprimer des données. Les actions proposées par un connecteur Bruno peuvent différer de celles du catalogue Pipedream.
  • Le nom anglais est conservé sous chaque action pour la retrouver dans Pipedream.

Actions proposées

  • Obtenir les données d’un scraping social

    Récupère les données associées à un job de scraping social à partir d’un identifiant de réponse.

    Nom d’origine : Get Social Media Scraping Data
    Documentation Pipedream →
  • Demander un scraping social

    Lance une requête de scraping vers un site de réseau social.

    Nom d’origine : Request Social Media Scraping
    Documentation Pipedream →
  • Extraire un moteur de recherche

    Extrait des données ciblées depuis les résultats de Google ou de Bing.

    Nom d’origine : Scrape Search Engine
    Documentation Pipedream →
  • Extraire une page web

    Extrait des données ciblées depuis une page web précise.

    Nom d’origine : Scrape Webpage
    Documentation Pipedream →

Déclencheurs répertoriés par Pipedream

Aucune action ou aucun déclencheur répertorié ici. Une connexion ne suffit pas à rendre une action disponible dans Bruno.

Source vérifiée le : ScrapingBot sur Pipedream.