# Сборщики данных

При использовании Crawling API вы получите обратно полный HTML страницы, но если вы хотите получить обратно скопированное содержимое, вы можете использовать любой из доступных скребков, которые у нас есть. Для недоступных скребков вам придется получить обратно полный HTML и скопировать содержимое самостоятельно.

Наши доступные скраперы позволяют вам извлекать данные непосредственно с веб-сайта без необходимости создания HTML-парсеров при использовании наших Crawling API.

Скребки необязательны., и вы всегда можете получить полный HTML-код страницы, если используете API без какого-либо скрапера.

Начать, выберите скребок на боковой панели для извлечения данных. Пожалуйста обратитесь в службу поддержки, Если у вас есть вопросы или вам нужна помощь.

# Amazon

Чтобы использовать скраперы Amazon, используйте API как вы бы это делали регулярно и добавьте &scraper= параметр для получения HTML, проанализированного в формате JSON.

• Получите цену, название, наличие, описание, изображения, обзоры и предложения, а также много другой информации для любого товара на Amazon.

• Получите структурированную SERP и отформатированные результаты поиска бестселлеров от Amazon.

# amazon-product-details

Скрейпер для получения общих сведений о странице продукта Amazon

Использование API:

&scraper=amazon-product-details

Пример входного URL-адреса (убедитесь, что URL-адрес закодирован):

https://www.amazon.com/Apple-iPhone-Silicone-Case-MagSafe/dp/B0CHX2XFLN

Пример вывода:

# amazon-serp

Скрейпер для страницы результатов поиска Amazon, возвращает массив продуктов

Использование API:

&scraper=amazon-serp

Пример входного URL-адреса (убедитесь, что URL-адр��с закодирован):

https://www.amazon.com/s?k=games

Пример вывода:

# amazon-offer-listing

Скрейпер для сбора общих сведений о страницах листинга предложений Amazon.

Использование API:

&scraper=amazon-offer-listing

Пример входного URL-адреса (убедитесь, что URL-адрес закодирован):

https://www.amazon.com/gp/offer-listing/B01KJEOCDW

Пример вывода:

# amazon-product-reviews

Скрейпер для получения общих сведений о страницах с обзорами товаров Amazon.

Использование API:

&scraper=amazon-product-reviews

Пример входного URL-адреса (убедитесь, что URL-адрес закодирован):

https://www.amazon.com/hz/reviews-render/ajax/medley-filtered-reviews/get/ref=cm_cr_dp_d_fltrs_srt?scope=reviewsAjax0&asin=B08PN7R2MZ&pageNumber=10

Пример вывода:

# Amazon-бестселлеры

Скрейпер для страницы результатов «Лучшие продавцы Amazon» возвращает массив товаров.

Использование API:

&scraper=amazon-best-sellers

Пример входного URL-адреса (убедитесь, что URL-адрес закодирован):

https://www.amazon.com/Best-Sellers-Electronics/zgbs/electronics

Пример вывода:

# amazon-новые-релизы

Скрейпер для страницы новых релизов Amazon возвращает массив продуктов.

Использование API:

&scraper=amazon-new-releases

Пример входного URL-адреса (убедитесь, что URL-адрес закодирован):

https://www.amazon.com/new-releases/handmade

Пример вывода:

# Google

Чтобы использовать Google-скрейперы, используйте API как вы бы это делали регулярно и добавьте &scraper= параметр для получения HTML, проанализированного в формате JSON.

• Получайте структурированные результаты поиска от Google, включая основные разделы (реклама, похожие результаты поиска, люди также спрашивают, упаковка закусок).

# google-serp

Скрейпер для страницы результатов поиска Google, возвращает массив результатов

Использование API:

&scraper=google-serp

Пример входного URL-адреса (убедитесь, что URL-адрес закодирован):

https://www.google.com/search?q=samsung+shops

Пример вывода:

# google-product-offers

Скрейпер для страницы предложений товаров Google Shopping, возвращает подробные списки предложений с ценами, рейтингами и информацией о продавце для определенного URL-адреса товара

Использование API:

&scraper=google-product-offers

Пример входного URL-адреса (убедитесь, что URL-адрес закодирован):

https://www.google.com/shopping/product/7015446445080090940/offers

Пример вывода:

# Facebook

Чтобы использовать скраперы Facebook, используйте API как вы бы это делали регулярно и добавьте &scraper= параметр для получения HTML, проанализированного в формате JSON.

• Извлеките название публичной группы, описание, изображения, ленты и соответствующие комментарии, а также другие сведения со страниц групп Facebook.

• Получите структурированные и отформатированные данные страницы Facebook.

• Извлеките имя профиля, изображения профиля и обложки, работу и образование, количество друзей и другие профили с похожими именами.

# facebook-группа

Скрейпер для общих сведений о странице группы Facebook

Использование API:

&scraper=facebook-group

Пример входного URL-адреса (убедитесь, что URL-адрес закодирован):

https://www.facebook.com/groups/198722650913932

Пример вывода:

# facebook-страница

Скрейпер для общих данных страницы Facebook

Использование API:

&scraper=facebook-page

Пример входного URL-адреса (убедитесь, что URL-адрес закодирован):

https://www.facebook.com/Amazon/

Пример вывода:

# facebook-профиль

Скрейпер для общего профиля Facebook

Использование API:

&scraper=facebook-profile

Пример входного URL-адреса (убедитесь, что URL-адрес закодирован):

https://www.facebook.com/zuck

Пример вывода:

# facebook-хэштег

Скребок для хэштега Facebook

Использование API:

&scraper=facebook-hashtag

Пример входного URL-адреса (убедитесь, что URL-адрес закодирован):

https://www.facebook.com/hashtag/robots

Пример вывода:

# facebook-событие

Скребок для мероприятия Facebook

Использование API:

&scraper=facebook-event

Пример входного URL-адреса (убедитесь, что URL-адрес закодирован):

https://www.facebook.com/events/1543404119289643

Пример вывода:

# Instagram

Чтобы использовать Instagram-скрейперы, используйте API как вы бы это делали регулярно и добавьте &scraper= параметр для получения HTML, проанализированного в формате JSON.

• Получайте данные о публикациях и профилях, включая медиафайлы, хэштеги, подписи, местоположение и соответствующие ответы из публикаций в Instagram.

• Извлекайте информацию о публикациях со страниц хэштегов.

# instagram-reel

Скребок для общих данных о роликах Instagram

Использование API:

&scraper=instagram-reel

Пример входного URL-адреса (убедитесь, что URL-адрес закодирован):

https://www.instagram.com/reels/DHq4bFpID1_/

Пример вывода:

# instagram-пост

Скрейпер для общих сведений о постах в Instagram

Использование API:

&scraper=instagram-post

Пример входного URL-адреса (убедитесь, что URL-адрес закодирован):

https://www.instagram.com/p/B5LQhLiFFCX

Пример вывода:

# instagram-профиль

Скрейпер для общих данных профиля Instagram

Использование API:

&scraper=instagram-profile

Пример входного URL-адреса (убедитесь, что URL-адрес закодирован):

https://www.instagram.com/apple/

Пример вывода:

# instagram-хэштег

Скрейпер для общих страниц хэштегов Instagram

Использование API:

&scraper=instagram-hashtag

Пример входного URL-адреса (убедитесь, что URL-адрес закодирован):

https://www.instagram.com/explore/tags/love/

Пример вывода:

# instagram-reels-аудио

Собранные данные для роликов Instagram по определенному URL-адресу аудио

Использование API:

&scraper=instagram-reels-audio

Пример входного URL-адреса (убедитесь, что URL-адрес закодирован):

https://www.instagram.com/reels/audio/430642407673774

Пример вывода:

# LinkedIn

Чтобы использовать скраперы LinkedIn, используйте API как вы бы это делали регулярно и добавьте &scraper= параметр для получения HTML, проанализированного в формате JSON.

• Извлеките из профиля сведения об опыте, образовании, деятельности, публикациях, волонтерстве и все остальные разделы профиля из LinkedIn.

• Получите описание компании, основные данные о сотрудниках, местонахождение и многие другие сведения из LinkedIn.

# linkedin-профиль

Скрейпер для общих данных профиля LinkedIn

Использование API:

&scraper=linkedin-profile

Пример входного URL-адреса (убедитесь, что URL-адрес закодирован):

https://www.linkedin.com/in/kaitlyn-owen

Пример вывода:

# linkedin-компания

Скрейпер для общих сведений о компании LinkedIn

Использование API:

&scraper=linkedin-company

Пример входного URL-адреса (убедитесь, что URL-адрес закодирован):

https://www.linkedin.com/company/amazon

Пример вывода:

# linkedin-канал

Скрейпер для общей ленты LinkedIn, преобразующий ленты в данные JSON, что позволяет проводить эффективный анализ и принимать решения на основе данных.

Использование API:

&scraper=linkedin-feed

Пример входного URL-адреса (убедитесь, что URL-адрес закодирован):

https://www.linkedin.com/feed/update/urn:li:activity:7022155503770251267

Пример вывода:

# Quora

Чтобы использовать скребки Quora, используйте API как вы бы это делали регулярно и добавьте &scraper= параметр для получения HTML, проанализированного в формате JSON.

• Получите отформатированные результаты поиска вопросов из Quora.

• Извлекайте сведения о вопросах, включая рекламу, вики, теги, ответы и связанные вопросы из Quora.

# quora-serp

Скрейпер для страницы результатов поиска Quora, возвращает массив вопросов

Использование API:

&scraper=quora-serp

Пример входного URL-адреса (убедитесь, что URL-адрес закодирован):

https://www.quora.com/search?q=websitevoice

Пример вывода:

# quora-вопрос

Скрейпер для общих сведений о вопросах Quora вместе со всеми ответами

Использование API:

&scraper=quora-question

Пример входного URL-адреса (убедитесь, что URL-адрес закодирован):

https://www.quora.com/Which-is-the-best-tool-for-scraping-customer-reviews

Пример вывода:

# Airbnb

Чтобы использовать скраперы Airbnb, используйте API как вы бы это делали регулярно и добавьте &scraper= параметр для получения HTML, проанализированного в формате JSON.

• Получите отформатированные результаты поиска от Airbnb.

• Получите список резидентов Airbnb с указанием названия, местоположения, размещения, удобств, рейтинга, стоимости и т. д.

# airbnb-serp

Скрейпер для страницы результатов поиска Airbnb, возвращает массив жителей

Использование API:

&scraper=airbnb-serp

Пример входного URL-адреса (убедитесь, что URL-адрес закодирован):

https://www.airbnb.com/s/Beirut/homes

Пример вывода:

# Ebay

Чтобы использовать скребки Ebay, используйте API как вы бы это делали регулярно и добавьте &scraper= параметр для получения HTML, проанализированного в формате JSON.

• Получите цену, название, наличие, описание, изображения, сводку по доставке и многое другое для любого товара на Ebay.

• Получите структурированную SERP от Ebay.

# ebay-serp

Скрейпер для страницы результатов поиска Ebay, возвращает массив продуктов

Использование API:

&scraper=ebay-serp

Пример входного URL-адреса (убедитесь, что URL-адрес закодирован):

https://www.ebay.com/sch/i.html?_nkw=iphone+x

Пример вывода:

# ebay-продукт

Скребок для получения информации о странице продукта на Ebay

Использование API:

&scraper=ebay-product

Пример входного URL-адреса (убедитесь, что URL-адрес закодирован):

https://www.ebay.com/itm/156078647276

Пример вывода:

# ebay-продавец-магазин

Скребок для просмотра деталей страницы магазина продавца на eBay

Использование API:

&scraper=ebay-seller-shop

Пример входного URL-адреса (убедитесь, что URL-адрес закодирован):

https://www.ebay.com/str/watcheshalfprice

Пример вывода:

# AliExpress

Чтобы использовать скребки AliExpress, используйте API как вы бы это делали регулярно и добавьте &scraper= параметр для получения HTML, проанализированного в формате JSON.

• Получите цену, название, наличие, описание, изображения, отзывы, сведения о доставке и многие другие сведения о любом товаре AliExpress.

• Получите структурированную SERP от AliExpress.

# aliexpress-продукт

Скребок для деталей страницы товара AliExpress

Использование API:

&scraper=aliexpress-product

Пример входного URL-адреса (убедитесь, что URL-адрес закодирован):

https://www.aliexpress.com/item/1005008227636051.html

Пример вывода:

# aliexpress-serp

Скрейпер для страницы результатов поиска AliExpress, возвращает массив товаров

Использование API:

&scraper=aliexpress-serp

Пример входного URL-адреса (убедитесь, что URL-адрес закодирован):

https://www.aliexpress.com/wholesale?SearchText=water+bottle

Пример вывода:

# Bing

Чтобы использовать скраперы Bing, используйте API как вы бы это делали регулярно и добавьте &scraper= параметр для получения HTML, проанализированного в формате JSON.

• Получайте структурированные результаты поиска от Bing, включая ссылки на видео и связанные ссылки на результаты поиска.

# бинг-серп

Скрейпер для страницы результатов поиска Bing, возвращает массив результатов

Использование API:

&scraper=bing-serp

Пример входного URL-адреса (убедитесь, что URL-адрес закодирован):

https://www.bing.com/search?q=iphone

Пример вывода:

# Иммобилиенскаут24

Чтобы использовать скраперы Immobilienscout24, используйте API как вы бы это делали регулярно и добавьте &scraper= параметр для получения HTML, проанализированного в формате JSON.

• Получите структурированную информацию о недвижимости от Immobilienscout24.

# immobilienscout24-недвижимость

Скрейпер для получения информации о странице недвижимости immobilienscout24.

Использование API:

&scraper=immobilienscout24-property

Пример входного URL-адреса (убедитесь, что URL-адрес закодирован):

https://www.immobilienscout24.de/expose/158649507

Пример вывода:

# Walmart

Чтобы использовать скребки Walmart, используйте API как вы бы это делали регулярно и добавьте &scraper= параметр для получения HTML, проанализированного в формате JSON.

• Получите цену, название, описание, изображения, обзоры и рейтинги, а также много другой информации для любого продукта Walmart.

• Получите отформатированные результаты поиска со страницы результатов поиска Walmart.

• Получите форматированные данные со страницы категорий Walmart.

# walmart-serp

Скрейпер для страницы результатов поиска Walmart.

Использование API:

&scraper=walmart-serp

Пример входного URL-адреса (убедитесь, что URL-адрес закодирован):

https://www.walmart.com/search?q=samsung+galaxy

Пример вывода:

# walmart-product-details

Скребок для деталей страницы продукта Walmart

Использование API:

&scraper=walmart-product-details

Пример входного URL-адреса (убедитесь, что URL-адрес закодирован):

https://www.walmart.com/ip/Meta-Quest-3-512GB-Breakthrough-Mixed-Reality-Powerful-Performance-Asgard-s-Wrath-2/3551794083

Пример вывода:

# walmart-категория

Скрейпер для страницы категорий Walmart.

Использование API:

&scraper=walmart-category

Пример входного URL-адреса (убедитесь, что URL-адрес закодирован):

https://www.walmart.com/browse/home/dorm-decor/4044_1225301_1225229_7471338

Пример вывода:

# BestBuy

Чтобы использовать скребки BestBuy, используйте API как вы бы это делали регулярно и добавьте &scraper= параметр для получения HTML, проанализированного в формате JSON.

• Получите отформатированные результаты поиска со страницы результатов поиска BestBuy.

• Получите цену, название, описание, изображения, обзоры и рейтинги, а также много другой информации для любого продукта BestBuy.

# bestbuy-серп

Скрейпер для страницы результатов поиска BestBuy.

Использование API:

&scraper=bestbuy-serp

Пример входного URL-адреса (убедитесь, что URL-адрес закодирован):

https://www.bestbuy.com/site/searchpage.jsp?st=gaming+chair

Пример вывода:

# bestbuy-product-details

Скребок для получения подробной информации о странице продукта BestBuy

Использование API:

&scraper=bestbuy-product-details

Пример входного URL-адреса (убедитесь, что URL-адрес закодирован):

https://www.bestbuy.com/site/meta-quest-3-512gb-the-most-powerful-quest-ultimate-mixed-reality-experiences-get-batman-arkham-shadow-white/6596938.p

Пример вывода:

# G2

Для использования скребков G2 используйте API как вы бы это делали регулярно и добавьте &scraper= параметр для получения HTML, проанализированного в формате JSON.

• Получите название, описание, рейтинги, изображения, обзоры и видеообзоры, а также много другой информации для любого продукта G2.

# g2-product-reviews

Скребок для страницы отзывов о продуктах G2.

Использование API:

&scraper=g2-product-reviews

Пример входного URL-адреса (убедитесь, что URL-адрес закодирован):

https://www.g2.com/products/zoom/reviews

Пример вывода:

# Eventbrite

Чтобы использовать скребки Eventbrite, используйте API как вы бы это делали регулярно и добавьте &scraper= параметр для получения HTML, проанализированного в формате JSON.

• Извлеките список событий или подробную информацию о событии, включая название события, изображения, цену, скидку, описание, дату/время, организатора, слоты и многое другое.

# eventbrite-события-список

Скрейпер для результатов поиска событий Eventbrite.

Использование API:

&scraper=eventbrite-events-list

Пример входного URL-адреса (убедитесь, что URL-адрес закодирован):

https://www.eventbrite.com/d/ny--new-york/ai/

Пример вывода:

# eventbrite-событие-подробности

Скрейпер для страницы с подробностями событий Eventbrite.

Использование API:

&scraper=eventbrite-event-details

Пример входного URL-адреса (убедитесь, что URL-адрес закодирован):

https://www.eventbrite.com/e/marketing-essentials-1-day-training-in-new-york-city-ny-tickets-814175078577

Пример вывода:

# Общий

Чтобы использовать универсальные скребки, используйте API как вы бы это делали регулярно и добавьте &scraper= параметр для получения HTML, проанализированного в формате JSON.

• Общие извлечения ссылок, изображений, электронных писем и другого контента с любой страницы веб-сайта.

# универсальный экстрактор

Универсальный скрапер для извлечения контента с любой страницы веб-сайта.

Использование API:

&scraper=generic-extractor

Пример входного URL-адреса (убедитесь, что URL-адрес закодирован):

https://stackoverflow.com/

Пример вывода:

# email-экстрактор

Универсальный инструмент для извлечения адресов электронной почты с любой страницы веб-сайта.

Использование API:

&scraper=email-extractor

Пример входного URL-адреса (убедитесь, что URL-адрес закодирован):

https://letsencrypt.org/contact/

Пример вывода: