在面對網(wǎng)頁的阻攔后，如果我們想繼續(xù)收集一些數(shù)據(jù)的話，比較常見的辦法是改變我們請求訪問的地址，這就涉及到了地址的切換。對于剛?cè)腴T的python新手來說，如何切換ip有一  定的難度，畢竟很多人都沒有學習中都沒有嘗試過。所以小編整理了有關(guān)面對python反爬蟲的切換方法，具體內(nèi)容在接下來的內(nèi)容中進行展示，想要學習的小伙伴可以跟著一起看看。

　　調(diào)試開多少個線程，多長時間撥號切換IP一次最優(yōu)。每個網(wǎng)站對短時間內(nèi)訪問次數(shù)的屏蔽策略不一樣，這需要實際測試，找出抓取效率最大化的時間點。先開一個線程，一直抓取到IP被屏蔽，記錄下抓取耗時，總抓取次數(shù)，和成功抓取次數(shù)。 再開2個線程，重復上面步驟，記錄抓取耗時，總的和成功的抓取次數(shù)。再開4個線程，重復上面步驟。整理成一個表格如下，下圖是我抓天眼查時，統(tǒng)計抓取極限和細節(jié)調(diào)優(yōu)的表格

　　從上圖比較可以看出，當有6個線程時，是比較好的情況。耗時6秒，成功抓取80-110次。

　　開多少個線程調(diào)試出來了，那多久撥號一次呢?

　　從上面的圖片看到，貌似每隔6秒撥號是一個不錯的選擇�？梢赃@樣做，但是我選了另一個度量單位，就是每總抓取120次就重新?lián)芴枴�為什么這樣選呢?從上圖也能看到，基本抓到120次左右就會被屏蔽，每隔6秒撥號其實誤差比較大，因為網(wǎng)絡(luò)延遲等各種問題，導致6秒內(nèi)可能抓100次，也可能抓120次。