配置

了解如何使用 Thordata 的 Universal Scraping API 來獲取您的第一段爬取內容。

前往「通用抓取 配置」

1、爬取配置

您可以通過頁面右側的相關參數來設定您想要爬取的內容，包括：URL、請求方式、輸出格式、JS 渲染、阻擋網站資源載入、代理等。

點擊此處了解更多 Unlocker 參數說明。

2、將示例整合到您的代碼庫中

當所有參數均設定完成後，您就可以將右側產生的程式碼範例整合至您的代碼庫中進行使用了。

以 https://www.google.com/ 的數據抓取為例。請不要忘記將"token"替換為您的「API Token」。

curl --request POST --url 
https://universalapi.thordata.com/request --header 
"Authorization: Bearer xxxxxxxxxxxxxxxxxxxxxx"   --header 
"content-type: application/json" --data "
{"url":"https://www.google.com", 
"type":"html","js_render":"True"}"

如需更多協助，請通過電子郵件聯絡我們：[e-mail]