2022/03/26

VBA / 使用Excel VBA爬蟲Google搜尋結果

之前曾經用Python爬蟲Google搜尋結果

Py / 透過谷狗大神爬學校地址

Gg / 從GoogleBook、WorldCat、全國新書資訊網查詢ISBN 更新：全國新書資訊網 程式碼

Gg / 從GoogleBook、WorldCat、全國新書資訊網查詢ISBN

更新：全國新書資訊網

http://isbn.ncl.edu.tw/NEW_ISBNNet

後來再測試時，發現在原本的第2個重新導向跟第3個重新導向之間又多了一個重新導向

https://isbn.ncl.edu.tw/NEW_ISBNNet/main_DisplayResults.php?&Pact=DisplayAll4Simple

並且傳遞方式是用POST

所以修改了程式碼

//
var options22={
   'menthod':'post',
   //"followRedirects" : true,
   //"muteHttpExceptions": true,
   'headers':dataHeaders,
   'payload':params
};

//過了一陣子再測試時，發現多了這個轉址
var url22="https://isbn.ncl.edu.tw/NEW_ISBNNet/main_DisplayResults.php?&Pact=DisplayAll4Simple";
var hData22 = UrlFetchApp.fetch(url22,options22);
var rCode22 = hData22.getResponseCode();
Logger.log(rCode22);
var Headers22 = hData22.getAllHeaders();
Logger.log(Headers22);