Amazon 抓取参数
Web Scraper API Amazon 抓取参数
使用 Thordata 的 Web Scraper API 配置 Amazon 抓取参数,包括产品、Token、抓取URLs、卖家URLs、域名、关键词、排序方式、UPC、抓取最大页数、子类别等参数。
唯一标识:
token ,访问令牌(必填)
此参数用作 API 访问令牌,以确保抓取请求的合法性。
示例请求:
"Authorization: Bearer ********************************"
curl -X POST "https://scraperapi.thordata.com/builder" ^
-H "Authorization: Bearer ********************************" ^
-H "Content-Type: application/x-www-form-urlencoded" ^
-d "spider_name=amazon.com" ^
-d "spider_id=amazon_product_by-url" ^
-d "spider_parameters=[{\"url\": \"https://www.amazon.com/Best-Sellers-Tools-Home-Improvement-Kitchen-Bath-Fixtures/zgbs/hi/3754161/ref=zg_bs_unv_hi_2_680350011_1\",\"zip_code\": \"94107\"}]" ^
-d "spider_errors=true" ^
-d "file_name={{TasksID}}"一、产品-抓取产品信息工具: 1. Amazon - 通过 URL 收集产品信息
spider_id ,所属抓取工具(必填)
定义了使用哪个抓取工具。
示例请求:
spider_id=amazon_product_by-url
curl -X POST "https://scraperapi.thordata.com/builder" ^
-H "Authorization: Bearer Token-ID" ^
-H "Content-Type: application/x-www-form-urlencoded" ^
-d "spider_name=amazon.com" ^
-d "spider_id=amazon_product_by-url" ^
-d "spider_parameters=[{\"url\": \"https://www.amazon.com/Best-Sellers-Tools-Home-Improvement-Kitchen-Bath-Fixtures/zgbs/hi/3754161/ref=zg_bs_unv_hi_2_680350011_1\",\"zip_code\": \"94107\"}]" ^
-d "spider_errors=true" ^
-d "file_name={{TasksID}}" url ,抓取目标链接(必填)
该参数用于指定待抓取的 Amazon 的访问 URL 地址。
示例请求:
"url": "https://www.amazon.com/Best-Sellers-Tools-Home-Improvement-Kitchen-Bath-Fixtures/zgbs/hi/3754161/ref=zg_bs_unv_hi_2_680350011_1\"
curl -X POST "https://scraperapi.thordata.com/builder" ^
-H "Authorization: Bearer Token-ID" ^
-H "Content-Type: application/x-www-form-urlencoded" ^
-d "spider_name=amazon.com" ^
-d "spider_id=amazon_product_by-url" ^
-d "spider_parameters=[{\"url\": \"https://www.amazon.com/Best-Sellers-Tools-Home-Improvement-Kitchen-Bath-Fixtures/zgbs/hi/3754161/ref=zg_bs_unv_hi_2_680350011_1\",\"zip_code\": \"94107\"}]" ^
-d "spider_errors=true" ^
-d "file_name={{TasksID}}"zip_code ,邮政编码(可选)
该参数用于指定抓取页面中配送区域的邮政编码。
示例请求:
"zip_code": "94107"
curl -X POST "https://scraperapi.thordata.com/builder" ^
-H "Authorization: Bearer Token-ID" ^
-H "Content-Type: application/x-www-form-urlencoded" ^
-d "spider_name=amazon.com" ^
-d "spider_id=amazon_product_by-url" ^
-d "spider_parameters=[{\"url\": \"https://www.amazon.com/Best-Sellers-Tools-Home-Improvement-Kitchen-Bath-Fixtures/zgbs/hi/3754161/ref=zg_bs_unv_hi_2_680350011_1\",\"zip_code\": \"94107\"}]" ^
-d "spider_errors=true" ^
-d "file_name={{TasksID}}"Amazon - 通过畅销商品 URL 收集产品信息
url ,抓取目标链接(必填)
该参数用于指定待抓取的 Amazon 的访问 URL 地址。
示例请求:
"url": "https://www.amazon.com/Best-Sellers-Tools-Home-Improvement-Kitchen-Bath-Fixtures/zgbs/hi/3754161/ref=zg_bs_unv_hi_2_680350011_1"
Amazon - 通过类别 URL 收集产品数据
url ,抓取类别目标链接(必填)
该参数用于指定待抓取的 Amazon 的访问 URL 地址。
示例请求:
"url":"https://www.amazon.com/s?i=luggage-intl-ship"
sort_by ,排序方式(可选)
该参数用于配置类别页面抓取时的排序方式,支持按畅销品、最新到货、客户评论、价格或特色排序。参数值:
Best Sellers Newest Arrivals Average Rating Price: High to Low Price: Low to High Featured Recommendations
示例请求:
"sort_by":"Best Sellers"
Amazon - 通过关键词收集产品信息
Amazon - 通过 UPC 收集产品信息
二、产品-抓取产品评论工具 1. Amazon - 通过 URL 收集产品评论
url ,抓取目标链接(必填)
该参数用于指定待抓取的 Amazon 的访问 URL 地址。
示例请求:
"url": "https://www.amazon.com/HISDERN-Checkered-Handkerchief-Classic-Necktie/dp/B0BRXPR726"
三、产品-抓取全球产品信息工具 1. Amazon - 通过 URL 收集全球产品数据
2.1.Amazon - 通过品牌收集全球产品数据
url ,抓取目标链接(必填)
该参数用于指定待抓取的 Amazon 的访问 URL 地址。
示例请求:
"url": "https://www.amazon.com/s?k=football%26i=fashion%26rh=n%3A7141123011%2Cp_123%3A233083"
2.2. Amazon - 通过关键词 or 品牌收集全球产品数据
page_turning ,抓取页数(必填)
该参数用于设置抓取搜索结果的页数。输入数字 n 表示抓取从第一页到第 n 页的所有产品数据。
参数值:1-100000
示例请求:
"page_turning": "2"
Amazon - 通过类别 URL 收集全球产品数据
url ,抓取类别目标链接(必填)
该参数用于指定待抓取的 Amazon 的访问 URL 地址。
示例请求:
"url": "https://www.amazon.com/s?i=luggage-intl-ship"
sort_by ,排序方式(可选)
该参数用于配置类别页面抓取时的排序方式,支持按畅销品、最新到货、客户评论、价格或特色排序。 参数值:
Best Sellers Newest Arrivals Average Rating Price: High to Low Price: Low to High Featured Recommendations
示例请求:
"sort_by":"Best Sellers"
get_sponsored ,获取赞助商品(可选)
该参数用于配置 勾选 “True” 可同时收集赞助商品,即使它们不属于该类别。
参数值:true
false
示例请求:
"get_sponsored":"true"
Amazon - 通过关键词收集全球产品数据
Amazon - 通过卖家收集全球产品数据
url ,抓取目标链接(必填)
该参数用于指定待抓取的 Amazon 的访问 URL 地址。
示例请求:
"url":"https://www.amazon.de/stores/page/DE4854A4-1CF9-4C69-BF27-17B0E692ACF0"
四、产品-抓取卖家信息工具 1.Amazon - 通过 URL 收集卖家信息
url ,抓取目标链接(必填)
该参数用于指定待抓取的 Amazon 的访问 URL 地址。
示例请求:
"url": "https://www.amazon.com/sp?ie=UTF8%26seller=ADZ7LD48GVFQJ%26asin=B07H56J7K1%26ref_=dp_merchant_link%26isAmazonFulfilled=1"
五、产品-抓取产品列表 1.Amazon - 通过关键词收集产品列表
如果您需要更多帮助,请通过邮箱[email protected]联系我们。
Last updated
Was this helpful?