Google 抓取參數

Web Scraper API Google 抓取參數

使用 Thordata 的 Web Scraper API 配置 Google 抓取參數,包括URL、天數限制、關鍵詞、CID、經度、緯度、商家ID、國家等參數。

唯一標識:

chevron-righttoken 訪問令牌(必填)hashtag

此參數用作 API 訪問令牌,以確保抓取請求的合法性。

請求示例:

Authorization: Bearer ********************

curl -X POST "https://scraperapi.thordata.com/builder" ^
  -H "Authorization: Bearer ********************" ^
  -H "Content-Type: application/x-www-form-urlencoded" ^
  -d "spider_name=google.com" ^
  -d "spider_id=google_comment_by-url" ^
  -d "spider_parameters=[{\"url\": \"https://www.google.com/maps/place/Waterfront+Botanical+Gardens/@38.2630366,-85.7288454,15z/data=!4m8!3m7!1s0x8869731e16a7bdbd:0x2f5d238fefed7ca1!8m2!3d38.2632837!4d-85.7239738!9m1!1b1!16s%2Fg%2F11c709xzzx?hl=en%26entry=ttu\",\"days_limit\": \"10\"}]" ^
  -d "spider_errors=true" ^
  -d "file_name={{TasksID}}"

一、產品-抓取 Google 地圖評論信息:

  1. Google - 通過 URL 抓取地圖評論信息

chevron-rightspider_id所屬抓取工具(必填)hashtag

它定義了要使用的抓取工具。

請求示例:

spider_id=google_comment_by-url

curl -X POST "https://scraperapi.thordata.com/builder" ^
  -H "Authorization: Bearer Token-ID" ^
  -H "Content-Type: application/x-www-form-urlencoded" ^
  -d "spider_name=google.com" ^
  -d "spider_id=google_comment_by-url" ^
  -d "spider_parameters=[{\"url\": \"https://www.google.com/maps/place/Waterfront+Botanical+Gardens/@38.2630366,-85.7288454,15z/data=!4m8!3m7!1s0x8869731e16a7bdbd:0x2f5d238fefed7ca1!8m2!3d38.2632837!4d-85.7239738!9m1!1b1!16s%2Fg%2F11c709xzzx?hl=en%26entry=ttu\",\"days_limit\": \"10\"}]" ^
  -d "spider_errors=true" ^
  -d "file_name={{TasksID}}"
chevron-righturlURL(必填)hashtag

該參數用於指定待抓取的 Google 地圖評論訪問鏈接信息。

請求示例:

"url":"https://www.google.com/maps/place/Waterfront+Botanical+Gardens/@38.2630366,-85.7288454,15z/data=!4m8!3m7!1s0x8869731e16a7bdbd:0x2f5d238fefed7ca1!8m2!3d38.2632837!4d-85.7239738!9m1!1b1!16s%2Fg%2F11c709xzzx?hl=en%26entry=ttu"

curl -X POST "https://scraperapi.thordata.com/builder" ^
  -H "Authorization: Bearer Token-ID" ^
  -H "Content-Type: application/x-www-form-urlencoded" ^
  -d "spider_name=google.com" ^
  -d "spider_id=google_comment_by-url" ^
  -d "spider_parameters=[{\"url\": \"https://www.google.com/maps/place/Waterfront+Botanical+Gardens/@38.2630366,-85.7288454,15z/data=!4m8!3m7!1s0x8869731e16a7bdbd:0x2f5d238fefed7ca1!8m2!3d38.2632837!4d-85.7239738!9m1!1b1!16s%2Fg%2F11c709xzzx?hl=en%26entry=ttu\",\"days_limit\": \"10\"}]" ^
  -d "spider_errors=true" ^
  -d "file_name={{TasksID}}"
chevron-rightdays_limit 天數限製(可選)hashtag

該參數用於指定待抓取的 Google 地圖評論髮佈天數限製。即從當前日期開始向前檢索評論的天數。

請求示例:

"days_limit": "10"

curl -X POST "https://scraperapi.thordata.com/builder" ^
  -H "Authorization: Bearer Token-ID" ^
  -H "Content-Type: application/x-www-form-urlencoded" ^
  -d "spider_name=google.com" ^
  -d "spider_id=google_comment_by-url" ^
  -d "spider_parameters=[{\"url\": \"https://www.google.com/maps/place/Waterfront+Botanical+Gardens/@38.2630366,-85.7288454,15z/data=!4m8!3m7!1s0x8869731e16a7bdbd:0x2f5d238fefed7ca1!8m2!3d38.2632837!4d-85.7239738!9m1!1b1!16s%2Fg%2F11c709xzzx?hl=en%26entry=ttu\",\"days_limit\": \"10\"}]" ^
  -d "spider_errors=true" ^
  -d "file_name={{TasksID}}"

二、産品-抓取 Google 地圖詳細信息:

1.Google - 通過 URL 抓取地圖詳細信息

chevron-rightspider_id所屬抓取工具(必填)hashtag

它定義了要使用的抓取工具。

請求示例:

spider_id=google_map-details_by-url

chevron-righturlURL(必填)hashtag

該參數用於指定待抓取的 Google 地圖訪問鏈接。

請求示例::

"url":"https://www.google.com/maps/place/Pizza+Inn+Magdeburg/@52.1263086,11.6094743,761m/data=!3m2!1e3!4b1!4m6!3m5!1s0x47a5f50c083530a3:0xfdba8746b538141!8m2!3d52.1263086!4d11.6094743!16s%2Fg%2F11kqmtk3dt?authuser=0%26hl=en%26entry=ttu%26g_ep=EgoyMDI1MDMxMi4wIKXMDSoASAFQAw%3D%3D"

2. Google - 通過 CID 抓取地圖詳細信息。

chevron-rightspider_id所屬抓取工具(必填)hashtag

它定義了要使用的抓取工具。

請求示例:

spider_id=google_map-details_by-cid

chevron-rightCIDCID(必填)hashtag

該參數用於指定待抓取的 CID 信息。CID(Customer ID)是Google Maps和Google My Business(GMB)中的一個唯一標識符,用於表示和識別一個特定的商業位置或地點。

請求示例:

"CID": "2476046430038551731"

3. Google - 通過位置抓取地圖詳細信息

chevron-rightspider_id所屬抓取工具(必填)hashtag

它定義了要使用的抓取工具。

請求示例:

spider_id=google_map-details_by-location

chevron-rightkeyword關鍵詞(必填)hashtag

該參數用於指定通過特定關鍵詞搜索地圖信息,可以是位置、郵政編碼或類別。

請求示例:

"keyword": "Jio Store, 1449/137, Main 100 Ft Road"

chevron-rightcountry國家(必填)hashtag

該參數用於指定要搜索的國家。

參數值:gb,af,al,dz,ax,as,ad,ao,ai,aq,ag,ar,am,aw,au,at,az,bs,bh,je,bd,bb,by,be,bz,bj,bm,bt,bo,bq,ba,bw,br,bn,bg,bf,bi,kh,cm,ca,cv,ky,cf,td,cl,cn,cx,cc,co,km,cg,ck,cr,ci,hr,cu,cw,cy,cz,cd,dk,dj,dm,do,ec,eg,sv,gq,er,eu,ee,et,fk,fo,fj,fi,fr,gf,pf,tf,ga,gm,ge,de,gh,gi,gb,gr,gl,gd,gu,gp,gt,gg,gn,gw,gy,ht,hn,hk,hu,is,in,id,io,ir,iq,ie,im,il,jm,jp,jo,kz,ke,ki,xk,kw,kg,la,lv,lb,ls,lr,ly,li,lt,lu,mo,mk,mg,mw,my,mv,ml,mt,mh,mq,mr,mu,yt,mx,fm,md,mc,mn,me,ms,ma,mz,mm,na,nr,np,nl,an,nc,nz,ni,ne,ng,nu,nf,kp,mp,no,om,pk,pw,ps,pa,pg,py,pe,ph,pn,pl,pm,pt,pr,qa,re,ro,ru,rw,bl,sh,kn,lc,mf,vc,sm,st,sa,sn,rs,sc,sl,sg,sx,sk,si,sb,so,za,gs,kr,ss,es,lk,sd,sr,se,ch,sy,tw,tj,tz,th,tl,tg,tk,to,tt,tn,tr,tm,tc,tv,ug,ua,ae,uk,us,uz,vu,va,ve,vn,vg,vi,wf,eh,ws,ye,zm,zw,bv,hm,dz

請求示例:

"country": "gb"

chevron-rightlat緯度(可選)hashtag

該參數用於指定要搜索的位置的緯度。

請求示例:

"lat": "28.6444225"

chevron-rightlong經度(可選)hashtag

該參數用於指定要搜索的位置的經度。

請求示例:

"long": "77.2416932"

chevron-rightzoom_level縮放級別(可選)hashtag

該參數用於指示要搜索的縮放級別。

請求示例:

"zoom_level": "1"

4. Google - 通過 place_id 抓取地圖詳細信息

chevron-rightspider_id所屬抓取工具(必填)hashtag

它定義了要使用的抓取工具。

請求示例:

spider_id=google_map-details_by-placeid

chevron-rightplace_id商家 ID(必填)hashtag

該參數用於指定 Google 地圖的商家 ID。

請求示例:

"place_id": "ChIJS5WVcqWh9YgRHU08rJqLNsQ"

三、產品-抓取 Google 購物信息

1. Google - 通過 URL 抓取購物信息

chevron-rightspider_id所屬抓取工具(必填)hashtag

它定義了要使用的抓取工具。

請求示例:

spider_id=google_shopping_by-url

chevron-righturlURL(必填)hashtag

該參數用於指定待抓取的 Google 產品訪問鏈接。

請求示例:

"url": "https://www.google.com/shopping/product/r/IL/16127099509847096080?prds=oid:7606538425324351917,eto:7606538425324351917_0,epd:7606538425324351917,prmr:1,rsk:PC_9055274590772580661%26rss=ChZQQ185MDU1Mjc0NTkwNzcyNTgwNjYx%26hl=en%26sa=X%26ved=2ahUKEwjOjry57OuEAxXqhloFHTg7CCwQkLoIegQIAhAM"

chevron-rightcountry 國家(可選)hashtag

該參數用於指定要搜索的國家。

參數值:United States,us 、United Kingdom,gb 、Canada,ca 、Australia,au 、Japan,jp 、Germany,de 、France,fr 、Italy,it 、Spain,es 、Netherlands,nl 、Sweden,se 、Switzerland,ch 、New Zealand,nz 、India,in 、South Korea,kr 、Singapore,sg 、Malaysia,my 、Mexico,mx 、Brazil,br 、Argentina,ar 、South Africa,za 、Colombia,co 、Turkey,tr 、United Arab Emirates,ae 、Poland,pl 、Portugal,pt 、Romania,ro 、Russia,ru 、Thailand,th 、Vietnam,vn 、Taiwan,tw 、Israel,il 、Indonesia,id 、Philippines,ph 、Finland,fi 、Denmark,dk 、Belgium,be 、Austria,at 、UK,gb 、Switzerland,ch

請求示例:

"country": "DZ"

2. Google - 通過關鍵詞抓取購物信息

chevron-rightspider_id所屬抓取工具(必填)hashtag

它定義了要使用的抓取工具。

請求示例:

spider_id=google_shopping_by-keywords

chevron-rightkeyword關鍵字(必填)hashtag

該參數用於指定關鍵字來收集產品數據。

請求示例:

"keyword": "iphone"

chevron-rightcountry,國家(必填)hashtag

該參數用於指定要搜索的國家。

參數值:United States,us 、United Kingdom,gb 、Canada,ca 、Australia,au 、Japan,jp 、Germany,de 、France,fr 、Italy,it 、Spain,es 、Netherlands,nl 、Sweden,se 、Switzerland,ch 、New Zealand,nz 、India,in 、South Korea,kr 、Singapore,sg 、Malaysia,my 、Mexico,mx 、Brazil,br 、Argentina,ar 、South Africa,za 、Colombia,co 、Turkey,tr 、United Arab Emirates,ae 、Poland,pl 、Portugal,pt 、Romania,ro 、Russia,ru 、Thailand,th 、Vietnam,vn 、Taiwan,tw 、Israel,il 、Indonesia,id 、Philippines,ph 、Finland,fi 、Denmark,dk 、Belgium,be 、Austria,at 、UK,gb 、Switzerland,ch

請求示例:

"country": "DZ"

如果您需要進壹步的幫助,請通過電子郵件聯系 [email protected]

Last updated