各位python爬蟲大?？催^來,這個網站的反爬蟲怎么處理

問題描述

https://www.everysaving.co.uk通過python爬取這個網站的數據,然而返回不了數據,！我加入了header和代理IP去抓取,也不行,望各位大牛們不妨試試看。。。

問題解答

代理訪問網站可見下圖：

通過https://www.17ce.com/，發現大陸幾乎都被屏蔽了，Http狀態返回403。此網站的安全策略級別比較高，建議使用歐美地區的高匿代理 VPN或者服務器，降低抓取頻次。

fiddler抓包，瀏覽器發什么你就發什么

你這個地址直接通過瀏覽器也訪問不了呀，被墻了吧？

我直接點開是不能訪問的，測試用了新加坡的代理可以打開