我們在制作爬蟲的過程中經常會遇到這種情況，一開始爬蟲運行正常，抓取數據正常，一切看起來都那么美好。然而，如果你不注意，可能會出錯，比如被ip封禁，所以趕緊找出四種解決爬蟲被IP封禁的方法。

1.方法。

不管你想收藏什么樣的網站，代理ip肯定是需要的，但是要注意一定要用國內代理ip，可以直接從ip代理購買，但一定要可靠。

第一，程序的邏輯變化不大，只需要IP代理函數。

第二，可以根據對方網站不同的屏蔽規(guī)則購買不同的ip代理。

第三，假設你目前使用的代理ip被對方網站屏蔽了，你可以在不改變程序邏輯的情況下更改IP。

2.方法。

少數網站防范措施薄弱。可以偽裝從代理IP服務提供商購買的IP，修改x-forward-因為，這是可以繞過的。

大多數網站如果要經常抓取，通常需要更多的IP。我的首選方案是直接購買HTTP代理ip。

3.方法。

ADSL腳本，監(jiān)控是否被屏蔽，然后不斷切換ip。

設置查詢頻率限制

正統(tǒng)的方式是調用這個網站提供的服務接口。

4.方法。

用戶IP代理偽裝和輪換

使用代理ip

精靈IP代理cookies處理，有些網站對登錄用戶有更寬松的策略。