很多人在網(wǎng)上看到過(guò)這樣的文章：代理IP能突破訪問(wèn)限制，提高訪問(wèn)速度，隱藏真實(shí)IP，等等一大堆的優(yōu)點(diǎn)，頗有點(diǎn)無(wú)所不能的感覺(jué)。等到自己使用代理IP時(shí)，卻發(fā)現(xiàn)這不行，那不行，感覺(jué)自己使用的是假代理IP，這是怎么回事呢？
一、代理IP也怕反爬
當(dāng)您使用本機(jī)IP訪問(wèn)某網(wǎng)站時(shí)，本機(jī)IP受到了訪問(wèn)限制。您想到了使用代理IP來(lái)解決，但使用代理IP不一會(huì)，同樣受到了訪問(wèn)限制。這是為什么呢，可能原因有哪些呢？
1、沒(méi)有偽裝User-Agent，在目標(biāo)網(wǎng)站的眼中，你就是一個(gè)自動(dòng)程序訪問(wèn)，并非真實(shí)用戶訪問(wèn)，哪怕你使用了質(zhì)量再高的代理IP，依然被識(shí)別，同樣受到限制。
2、Referer防盜鏈。有些圖片或視頻網(wǎng)站經(jīng)常會(huì)有這樣的防盜鏈機(jī)制，如果你是直接訪問(wèn)某個(gè)URL，不管使用質(zhì)量多高的代理IP，怎么訪問(wèn)都會(huì)失敗，header里需要帶上Referer（上一個(gè)URL）才能成功。
3、訪問(wèn)頻率過(guò)快。網(wǎng)站管理員為了減輕服務(wù)器的壓力，通常會(huì)設(shè)置訪問(wèn)頻率的閾值，比如一分鐘可以訪問(wèn)多少次，超過(guò)這個(gè)閾值就會(huì)限制IP訪問(wèn)，使用代理IP也有遵循這個(gè)規(guī)則，否則也會(huì)受到限制。
4、其他原因，比如訪問(wèn)網(wǎng)頁(yè)間隔有規(guī)律，不管訪問(wèn)什么url，都是1秒時(shí)間，這樣很容易被識(shí)別，受到限制，還有cookie，驗(yàn)證碼等等方面因素。
二、代理IP以量取勝
如果你的本機(jī)IP在10秒內(nèi)訪問(wèn)某網(wǎng)站100次受到了限制，那么使用代理IP訪問(wèn)了100次，同樣會(huì)受到限制。解決方案可以是這樣：使用5個(gè)代理IP，在10秒內(nèi)每個(gè)代理IP訪問(wèn)該網(wǎng)站20次，采取這樣的策略，代理IP就不會(huì)受到限制了。
代理IP的優(yōu)點(diǎn)是量多，可以購(gòu)買(mǎi)成千上萬(wàn)個(gè)代理IP來(lái)完成任務(wù)，而本機(jī)IP往往只有1個(gè)，受到限制后就沒(méi)辦法訪問(wèn)了，代理IP則不怕，一個(gè)代理IP受到限制了，可以切換另一個(gè)代理IP來(lái)繼續(xù)工作，當(dāng)然，最有效率的方法是不觸發(fā)反爬策略，不受限制，穩(wěn)定持續(xù)的工作。
