爬蟲所需的代理IP是什么？-天啟HTTP
在爬取某些網站時，我們經常會設置HTTP代理IP來避免爬蟲程序被封。我們獲取代理 IP 地址方式通常提取國內的知名IP代理商的免費代理。這些代理商一般都會提供透明代理，匿名代理，高匿代理。以下主要內容是講解各種IP代理背后的原理。
1、代理類型
代理類型一共能分為三種。透明代理，匿名代理，高匿代理，從安全程度來說，這四種代理類型的排序是 高匿 > 匿名 > 透明。
2、代理類型區別
透明代理(Transparent Proxy)
代理服務器的配置如下：
透明代理雖然可以直接“隱藏”客戶端的 IP 地址，但是還是可以從來查到客戶端的 IP 地址。
匿名代理(Anonymous Proxy)
代理服務器的配置如下：
匿名代理能提供隱藏客戶端 IP 地址的功能。使用匿名代理，服務器能知道客戶端使用用了代理，當無法知道客戶端真實 IP 地址。
高匿代理(Elite Proxy 或 High Anonymity Proxy)
代理服務器的配置如下：
高匿代理既能讓服務器不清楚客戶端是否在使用代理，也能保證服務器獲取不到客戶端的真實 IP 地址。
3、在如何獲得高質量http上
普通匿名代理能隱藏客戶機的真實 IP，但會改變我們的請求信息，服務器端有可能會認為我們使用了代理。
不過使用此種代理時，雖然被訪問的網站不能知道客戶端的 IP 地址，但仍然可以得到你在使用代理，當然某些能夠偵測 IP 的網頁仍然可以查到客戶端的 IP。
而高度匿名代理不改變客戶機的請求，這樣在服務器看來就像有個真正的客戶瀏覽器在訪問它，這時客戶的真實IP是隱藏的，服務器端不會認為我們使用了代理。
因此，爬蟲程序需要使用到代理 IP 時，盡量選擇高匿名代理。例如網絡爬蟲配合，海量的優質可用代理豐富的ip資源，高度匿名，保護隱私，保障數據安全才會保證工作效率。
另外，如果要保證數據不被代理服務器知道，推薦使用HTTPS協議的代理。
