# Extracteurs de données
Lorsque vous utilisez le Crawling API Vous récupérerez la page HTML complète, mais si vous souhaitez récupérer le contenu récupéré, vous pouvez utiliser l'un des scrapers disponibles dont nous disposons. Pour les scrapers non disponibles, vous devrez récupérer le code HTML complet et récupérer le contenu vous-même.
Nos scrapers disponibles vous permettent d'extraire les données directement d'un site Web sans avoir besoin de créer des analyseurs HTML tout en utilisant notre Crawling API.
Les grattoirs sont facultatifs, et vous pouvez toujours récupérer le HTML complet de la page si vous utilisez l'API sans aucun scraper.
Commencer, Choisissez un grattoir dans la barre latérale pour extraire les données. S'il vous plaît contacter le support technique si vous avez des questions ou avez besoin d'aide.
# Amazon
Pour utiliser les scrapers Amazon, utilisez le API comme vous le feriez régulièrement et ajoutez le &scraper= paramètre pour récupérer le HTML analysé au format JSON.
Obtenez le prix, le titre, la disponibilité, la description, les images, les avis, les offres et bien plus d'informations pour n'importe quel produit Amazon.
Obtenez des résultats de recherche SERP structurés et formatés des meilleures ventes d'Amazon.
# détails-du-produit-amazon
Grattoir pour les détails des pages de produits génériques d'Amazon
Utilisation de l'API :
&scraper=amazon-product-details
Exemple d'URL d'entrée (assurez-vous que l'URL est codée) :
https://www.amazon.com/Apple-iPhone-Silicone-Case-MagSafe/dp/B0CHX2XFLN
Exemple de sortie:
# Amazon-Serp
Scraper pour la page de résultats de recherche Amazon, renvoie une gamme de produits
Utilisation de l'API :
&scraper=amazon-serp
Exemple d'URL d'entrée (assurez-vous que l'URL est codée) :
https://www.amazon.com/s?k=games
Exemple de sortie:
# liste-d'offres-amazon
Grattoir pour les détails de la page de liste des offres génériques d'Amazon.
Utilisation de l'API :
&scraper=amazon-offer-listing
Exemple d'URL d'entrée (assurez-vous que l'URL est codée) :
https://www.amazon.com/gp/offer-listing/B07S5QWM6L
Exemple de sortie:
# Avis sur les produits Amazon
Grattoir pour les détails de la page d'avis de produits génériques d'Amazon.
Utilisation de l'API :
&scraper=amazon-product-reviews
Exemple d'URL d'entrée (assurez-vous que l'URL est codée) :
https://www.amazon.com/hz/reviews-render/ajax/medley-filtered-reviews/get/ref=cm_cr_dp_d_fltrs_srt?scope=reviewsAjax0&asin=B08PN7R2MZ&pageNumber=10
Exemple de sortie:
# meilleures ventes d'Amazon
Grattoir pour la page de résultats des meilleures ventes d'Amazon, renvoie une gamme de produits.
Utilisation de l'API :
&scraper=amazon-best-sellers
Exemple d'URL d'entrée (assurez-vous que l'URL est codée) :
https://www.amazon.com/Best-Sellers-Electronics/zgbs/electronics
Exemple de sortie:
# nouveautés d'Amazon
Grattoir pour la page des nouvelles versions d'Amazon, renvoie un éventail de produits.
Utilisation de l'API :
&scraper=amazon-new-releases
Exemple d'URL d'entrée (assurez-vous que l'URL est codée) :
https://www.amazon.com/new-releases/handmade
Exemple de sortie:
Pour utiliser les scrapers Google, utilisez le API comme vous le feriez régulièrement et ajoutez le &scraper= paramètre pour récupérer le HTML analysé au format JSON.
- Obtenez des résultats de recherche structurés de Google, y compris les sections principales (annonces, résultats de recherche associés, les gens demandent également, pack de collations).
# google-serp
Scraper pour la page de résultats de recherche Google, renvoie un tableau de résultats
Utilisation de l'API :
&scraper=google-serp
Exemple d'URL d'entrée (assurez-vous que l'URL est codée) :
https://www.google.com/search?q=samsung+shops
Exemple de sortie:
Conseil
Les scrapers Facebook suivants peuvent fonctionner mieux avec votre jeton JavaScript (JS). Si vous obtenez une réponse vide avec votre jeton TCP, veuillez passer à l'utilisation du jeton JS.
Pour utiliser les scrapers Facebook, utilisez le API comme vous le feriez régulièrement et ajoutez le &scraper= paramètre pour récupérer le HTML analysé au format JSON.
Extrayez le nom du groupe public, la description, les images, les flux et leurs commentaires correspondants avec d'autres détails des pages de groupe Facebook.
Obtenez des détails de page Facebook structurés et formatés.
Extrayez le nom du profil, les images de profil et de couverture, le travail et l'éducation, le nombre d'amis et d'autres profils avec des noms similaires.
# groupe facebook
Scraper pour les détails de la page de groupe Facebook générique
Utilisation de l'API :
&scraper=facebook-group
Exemple d'URL d'entrée (assurez-vous que l'URL est codée) :
https://www.facebook.com/groups/198722650913932
Exemple de sortie:
# page facebook
Scraper pour les détails génériques de la page Facebook
Utilisation de l'API :
&scraper=facebook-page
Exemple d'URL d'entrée (assurez-vous que l'URL est codée) :
https://www.facebook.com/Amazon/
Exemple de sortie:
# profil Facebook
Scraper pour profil Facebook générique
Utilisation de l'API :
&scraper=facebook-profile
Exemple d'URL d'entrée (assurez-vous que l'URL est codée) :
https://www.facebook.com/zuck
Exemple de sortie:
# hashtag facebook
Grattoir pour hashtag Facebook
Utilisation de l'API :
&scraper=facebook-hashtag
Exemple d'URL d'entrée (assurez-vous que l'URL est codée) :
https://www.facebook.com/hashtag/robots
Exemple de sortie:
# événement facebook
Scraper pour événement Facebook
Utilisation de l'API :
&scraper=facebook-event
Exemple d'URL d'entrée (assurez-vous que l'URL est codée) :
https://www.facebook.com/events/1543404119289643
Exemple de sortie:
Conseil
Les scrapers Instagram suivants peuvent fonctionner mieux avec votre jeton JavaScript (JS). Si vous obtenez une réponse vide avec votre jeton TCP, veuillez passer à l'utilisation du jeton JS.
Pour utiliser les scrapers Instagram, utilisez le API comme vous le feriez régulièrement et ajoutez le &scraper= paramètre pour récupérer le HTML analysé au format JSON.
Obtenez les détails des publications et des profils, y compris les médias, les hashtags, les légendes, l'emplacement et leurs réponses correspondantes à partir des publications Instagram.
Extraire les détails des publications à partir des pages de hashtag.
# publication instagram
Grattoir pour les détails génériques des publications Instagram
Utilisation de l'API :
&scraper=instagram-post
Exemple d'URL d'entrée (assurez-vous que l'URL est codée) :
https://www.instagram.com/p/B5LQhLiFFCX
Exemple de sortie:
# profil instagram
Grattoir pour les détails génériques du profil Instagram
Utilisation de l'API :
&scraper=instagram-profile
Exemple d'URL d'entrée (assurez-vous que l'URL est codée) :
https://www.instagram.com/apple/
Exemple de sortie:
# hashtag instagram
Attention:
Notre instagram-hashtag Le scraper n'est actuellement pas disponible en raison de modifications apportées par Instagram. Nous travaillons sur un correctif, mais nous n'avons pas d'ETA pour le moment.
Scraper pour les pages de hashtag Instagram génériques
Utilisation de l'API :
&scraper=instagram-hashtag
Exemple d'URL d'entrée (assurez-vous que l'URL est codée) :
https://www.instagram.com/explore/tags/love/
Exemple de sortie:
# instagram-reels-audio
Données extraites des reels Instagram par URL audio spécifique
Utilisation de l'API :
&scraper=instagram-reels-audio
Exemple d'URL d'entrée (assurez-vous que l'URL est codée) :
https://www.instagram.com/reels/audio/430642407673774
Exemple de sortie:
Pour utiliser les scrapers LinkedIn, utilisez le API comme vous le feriez régulièrement et ajoutez le &scraper= paramètre pour récupérer le HTML analysé au format JSON.
Extraire l'expérience du profil, la formation, les activités, les publications, le bénévolat et toutes les autres sections de profil de LinkedIn.
Obtenez la description de l'entreprise, les principaux détails des employés, les emplacements et bien d'autres détails sur LinkedIn.
# profil LinkedIn
Scraper pour les détails génériques du profil LinkedIn
Utilisation de l'API :
&scraper=linkedin-profile
Exemple d'URL d'entrée (assurez-vous que l'URL est codée) :
https://www.linkedin.com/in/kaitlyn-owen
Exemple de sortie:
# entreprise-linkedin
Scraper pour les informations génériques sur les entreprises LinkedIn
Utilisation de l'API :
&scraper=linkedin-company
Exemple d'URL d'entrée (assurez-vous que l'URL est codée) :
https://www.linkedin.com/company/amazon
Exemple de sortie:
# fil d'actualité
Scraper pour flux LinkedIn générique qui transforme les flux en données JSON, permettant une analyse efficace et des décisions basées sur les données.
Utilisation de l'API :
&scraper=linkedin-feed
Exemple d'URL d'entrée (assurez-vous que l'URL est codée) :
https://www.linkedin.com/feed/update/urn:li:activity:7022155503770251267
Exemple de sortie:
# Quora
Pour utiliser les scrapers Quora, utilisez le API comme vous le feriez régulièrement et ajoutez le &scraper= paramètre pour récupérer le HTML analysé au format JSON.
Obtenez des résultats de recherche de questions formatées à partir de Quora.
Extrayez les détails des questions, y compris les publicités, le wiki, les balises, les réponses et les questions associées de Quora.
# Quora-Serp
Attention:
Notre quora-serp Scraper n'est actuellement pas disponible en raison de modifications apportées par Quora. Nous travaillons sur un correctif, mais nous n'avons pas de date de sortie prévue pour le moment.
Conseil
Pour récupérer des données supplémentaires à l'aide de ce scraper, veuillez ajouter le paramètre &css_click_selector=.q-text.qu-cursor--pointerCela vous permettra de maximiser l'extraction de vos données.
Scraper pour la page de résultats de recherche Quora, renvoie un tableau de questions
Utilisation de l'API :
&scraper=quora-serp
Exemple d'URL d'entrée (assurez-vous que l'URL est codée) :
https://www.quora.com/search?q=websitevoice
Exemple de sortie:
# question quora
Scraper pour les détails des questions génériques de Quora ainsi que toutes les réponses
Utilisation de l'API :
&scraper=quora-question
Exemple d'URL d'entrée (assurez-vous que l'URL est codée) :
https://www.quora.com/Which-is-the-best-tool-for-scraping-customer-reviews
Exemple de sortie:
# Airbnb
Pour utiliser les scrapers Airbnb, utilisez le API comme vous le feriez régulièrement et ajoutez le &scraper= paramètre pour récupérer le HTML analysé au format JSON.
Obtenez des résultats de recherche formatés depuis Airbnb.
Obtenez la liste des résidents Airbnb avec le titre, l'emplacement, l'hébergement, les équipements, les coûts d'évaluation, etc.
# Airbnb-Serp
Scraper pour la page de résultats de recherche Airbnb, renvoie un tableau de résidents
Utilisation de l'API :
&scraper=airbnb-serp
Exemple d'URL d'entrée (assurez-vous que l'URL est codée) :
https://www.airbnb.com/s/Beirut/homes
Exemple de sortie:
# ebay
Pour utiliser les scrapers Ebay, utilisez le API comme vous le feriez régulièrement et ajoutez le &scraper= paramètre pour récupérer le HTML analysé au format JSON.
Obtenez le prix, le titre, la disponibilité, la description, les images, les résumés d'expédition et bien plus d'informations pour tout produit Ebay.
Obtenez un SERP structuré d'Ebay.
# ebay-serp
Scraper pour la page de résultats de recherche Ebay, renvoie une gamme de produits
Utilisation de l'API :
&scraper=ebay-serp
Exemple d'URL d'entrée (assurez-vous que l'URL est codée) :
https://www.ebay.com/sch/i.html?_nkw=iphone+x
Exemple de sortie:
# produit ebay
Grattoir pour les détails de la page produit Ebay
Utilisation de l'API :
&scraper=ebay-product
Exemple d'URL d'entrée (assurez-vous que l'URL est codée) :
https://www.ebay.com/itm/156078647276
Exemple de sortie:
# AliExpress
Conseil
Les scrapers AliExpress suivants peuvent fonctionner mieux avec votre jeton JavaScript (JS). Si vous obtenez une réponse vide avec votre jeton TCP, veuillez passer à l'utilisation du jeton JS.
Pour utiliser les scrapers AliExpress, utilisez le API comme vous le feriez régulièrement et ajoutez le &scraper= paramètre pour récupérer le HTML analysé au format JSON.
Obtenez le prix, le titre, la disponibilité, la description, les images, les avis, les résumés d'expédition et de nombreux autres détails pour n'importe quel produit AliExpress.
Obtenez un SERP structuré d'AliExpress.
# produit aliexpress
Détails de la page produit du grattoir AliExpress
Utilisation de l'API :
&scraper=aliexpress-product
Exemple d'URL d'entrée (assurez-vous que l'URL est codée) :
https://www.aliexpress.com/item/4000275547643.html
Exemple de sortie:
# Aliexpress-Serp
Scraper pour la page de résultats de recherche AliExpress, renvoie une gamme de produits
Utilisation de l'API :
&scraper=aliexpress-serp
Exemple d'URL d'entrée (assurez-vous que l'URL est codée) :
https://www.aliexpress.com/wholesale?SearchText=water+bottle
Exemple de sortie:
# Bing
Pour utiliser les scrapers Bing, utilisez le API comme vous le feriez régulièrement et ajoutez le &scraper= paramètre pour récupérer le HTML analysé au format JSON.
- Obtenez des résultats de recherche structurés de Bing, y compris des liens vidéo et des liens de résultats de recherche associés.
# bing-serp
Scraper pour la page de résultats de recherche Bing, renvoie un tableau de résultats
Utilisation de l'API :
&scraper=bing-serp
Exemple d'URL d'entrée (assurez-vous que l'URL est codée) :
https://www.bing.com/search?q=samsung+shops
Exemple de sortie:
# Scout immobilier24
Pour utiliser les grattoirs Immobilienscout24, utilisez le API comme vous le feriez régulièrement et ajoutez le &scraper= paramètre pour récupérer le HTML analysé au format JSON.
- Obtenez des détails de propriété structurés auprès d'Immobilienscout24.
# immobilierscout24-property
Grattoir pour les détails de la page de propriété d'immobilienscout24.
Utilisation de l'API :
&scraper=immobilienscout24-property
Exemple d'URL d'entrée (assurez-vous que l'URL est codée) :
https://www.immobilienscout24.de/expose/144832356
Exemple de sortie:
# Walmart
Pour utiliser les grattoirs Walmart, utilisez le API comme vous le feriez régulièrement et ajoutez le &scraper= paramètre pour récupérer le HTML analysé au format JSON.
Obtenez le prix, le titre, la description, les images, les avis, les notes et bien plus d'informations pour n'importe quel produit Walmart.
Obtenez des résultats de recherche formatés à partir de la page de résultats de recherche de Walmart.
Obtenez des données formatées à partir de la page de catégorie Walmart.
# Walmart-Serp
Grattoir pour la page de résultats de recherche de Walmart.
Utilisation de l'API :
&scraper=walmart-serp
Exemple d'URL d'entrée (assurez-vous que l'URL est codée) :
https://www.walmart.com/search?q=samsung+galaxy
Exemple de sortie:
# détails-du-produit-walmart
Détails de la page produit du grattoir pour Walmart
Utilisation de l'API :
&scraper=walmart-product-details
Exemple d'URL d'entrée (assurez-vous que l'URL est codée) :
https://www.walmart.com/ip/Meta-Quest-3-512GB-Breakthrough-Mixed-Reality-Powerful-Performance-Asgard-s-Wrath-2/3551794083
Exemple de sortie:
# Catégorie Walmart
Grattoir pour la page de catégorie Walmart.
Utilisation de l'API :
&scraper=walmart-category
Exemple d'URL d'entrée (assurez-vous que l'URL est codée) :
https://www.walmart.com/browse/home/dorm-decor/4044_1225301_1225229_7471338
Exemple de sortie:
# BestBuy
Pour utiliser les grattoirs BestBuy, utilisez le API comme vous le feriez régulièrement et ajoutez le &scraper= paramètre pour récupérer le HTML analysé au format JSON.
Obtenez des résultats de recherche formatés à partir de la page de résultats de recherche BestBuy.
Obtenez le prix, le titre, la description, les images, les avis, les notes et bien plus d'informations pour n'importe quel produit BestBuy.
# meilleur achat-serp
Grattoir pour la page de résultats de recherche BestBuy.
Utilisation de l'API :
&scraper=bestbuy-serp
Exemple d'URL d'entrée (assurez-vous que l'URL est codée) :
https://www.bestbuy.com/site/searchpage.jsp?st=gaming+chair
Exemple de sortie:
# bestbuy-details-du-produit
Détails de la page produit du grattoir BestBuy
Utilisation de l'API :
&scraper=bestbuy-product-details
Exemple d'URL d'entrée (assurez-vous que l'URL est codée) :
https://www.bestbuy.com/site/meta-quest-3-512gb-the-most-powerful-quest-ultimate-mixed-reality-experiences-get-batman-arkham-shadow-white/6596938.p
Exemple de sortie:
# G2
Pour utiliser les grattoirs G2, utilisez le API comme vous le feriez régulièrement et ajoutez le &scraper= paramètre pour récupérer le HTML analysé au format JSON.
- Obtenez le nom, la description, les notes, les images, les avis et les critiques vidéo et bien plus d'informations pour tout produit G2.
# Avis sur les produits g2
Grattoir pour la page d'avis sur les produits G2.
Utilisation de l'API :
&scraper=g2-product-reviews
Exemple d'URL d'entrée (assurez-vous que l'URL est codée) :
https://www.g2.com/products/zoom/reviews
Exemple de sortie:
# Eventbrite
Pour utiliser les scrapers Eventbrite, utilisez le API comme vous le feriez régulièrement et ajoutez le &scraper= paramètre pour récupérer le HTML analysé au format JSON.
- Extrayez une liste d'événements ou des informations détaillées sur l'événement, y compris le titre de l'événement, les images, le prix, la remise, la description, la date/heure, l'organisateur, les créneaux horaires, etc.
# Liste des événements Eventbrite
Scraper pour les résultats de recherche d'événements Eventbrite.
Utilisation de l'API :
&scraper=eventbrite-events-list
Exemple d'URL d'entrée (assurez-vous que l'URL est codée) :
https://www.eventbrite.com/d/ny--new-york/ai/
Exemple de sortie:
# détails-de-l-evenement-eventbrite
Scraper pour la page de détails de l'événement Eventbrite.
Utilisation de l'API :
&scraper=eventbrite-event-details
Exemple d'URL d'entrée (assurez-vous que l'URL est codée) :
https://www.eventbrite.com/e/marketing-essentials-1-day-training-in-new-york-city-ny-tickets-814175078577
Exemple de sortie:
# Générique
Pour utiliser les scrapers génériques, utilisez le API comme vous le feriez régulièrement et ajoutez le &scraper= paramètre pour récupérer le HTML analysé au format JSON.
- Extractions génériques de liens, d'images, d'e-mails et d'autres contenus de n'importe quelle page de site Web.
# extracteur-générique
Un scraper générique pour extraire le contenu de n'importe quelle page de site Web.
Utilisation de l'API :
&scraper=generic-extractor
Exemple d'URL d'entrée (assurez-vous que l'URL est codée) :
https://stackoverflow.com/
Exemple de sortie:
# extracteur d'emails
Un grattoir de courrier électronique générique pour extraire les courriers électroniques de n'importe quelle page de site Web.
Utilisation de l'API :
&scraper=email-extractor
Exemple d'URL d'entrée (assurez-vous que l'URL est codée) :
https://letsencrypt.org/contact/
Exemple de sortie: