在網絡工作中,有很多地方需要使用HTTP代理,比如效果補充、數據抓取工具等。沒有HTTP代理的支持,我們的工作很難繼續下去,那么我們從哪里得到HTTP代理呢。
1. 收集閑置的代理IP:互聯網上有很多免費的代理IP,不需要錢。雖然效率不高,但對于一些預算較低的工人來說,犧牲時間節約成本還是可以接受的。如何收集大量的免費代理IP。手動復制和粘貼肯定不行,效率太低了。有兩種方法:一種是通過編寫代碼來抓取免費的代理IP,另一種是利用工具來吸收免費的代理IP。
2. ADSL撥號:ADSL撥號也叫VPS撥號。撥號后可以更改IP地址,相對比較穩定。你可以自己控制撥號時間,這比免費代理IP好得多。也可以編寫軟件或代碼來自動控制撥號工作,但對于一些工作量較大的任務來說,有點繁瑣,效率也不高。
3.第三方工具:互聯網上有很多集成的工具,其中有很多代理IP,可以一鍵切換IP。雖然效率比較低,用戶也比較多,速度也比較快,但還是勉強能勝任一些手工操作或者單線程掛起的業務。對于一些多線程任務,沒有辦法支持它們,比如爬蟲任務。