爬蟲問題, 如何在GOOGLE搜尋關鍵字後,取前10頁的網址?

webtest
2025-11-24 10:14:22

各位好

因為GOOGLE不給直接爬 Google Search HTML,會被阻擋,
我試過Google Custom Search API,結果與chrome完全不同,
請問各位大大,您的作法是?
謝謝您!

補充 :
這是以前做法的結果
https://www.archi.net.tw/tw/yelpage/keywordlist-order.asp

補充 :
Google 搜尋可用的&num=100參數,在2025年9月移除,
https://www.google.com.tw/search?q=kwd&num=100,
也阻止爬蟲抓取結果,我的方式也被阻擋了;
想請教為大大,您們抓取前100名的資料的方法是?
謝謝!