對每一個網絡爬蟲工作者、愛好者來說，在線代理ip是經常要用到的。因為網絡爬蟲是需要遵循一定的規則的：網絡運營者采取自動化手段訪問收集網站數據，不得妨礙網站正常運行；此類行為嚴重影響網站運行，如自動化訪問收集流量超過網站日均流量三分之一，網站要求停止自動化訪問收集時，應當立即停止。所以有很多網站為了自我保護，是會做反爬蟲的。
 

 

       在Python爬蟲中，有些網站可能為了防止爬蟲或者DDOS等，會記錄每個IP的訪問次數，有些網站允許一個IP在1s(或者別的)只能訪問10次等，那么我們就需要訪問一次換一個IP。

 

       代理IP選擇也十分講究，有些網站會通過檢查代理IP軟件的真實程度來限制爬蟲抓取，因此無論是免費代理IP還是收費代理IP，為了數據順利抓取，最好選擇高質量高匿名的代理IP，動態ip海在國內換ip，受到許多網民的熱捧，口碑較好，性價比高，還能提前免費測試。