對有些做網絡營銷推廣和做seo的用戶來說,每天都需要通過代理IP來訪問目标網站,例如:網絡營銷、數據抓取、論壇發帖、比價等操作都必須用IP代理來進行。不過在實際使用時很多用戶會發現自己的IP被目标網站服務器所識别出來,需要更換新IP才能繼續使用。一般來說服務器識别代理IP的方法有以下四種:
Keep-alive報文
如果IP帶有Proxy-Connection的Keep-alive報文,則可以判定該用戶使用了代理IP。
反向探測端口
服務器會掃描用戶IP是不是開通了80,8080等代理服務器經常開通的端口,這些端口一般來說用戶正常使用都不會接觸,代理IP用戶才會開通。
HTTP頭部的X_Forward_For
使用HTTP代理的用戶在HTTP頭部會帶有XFF信息,可以很輕松的判斷出用戶是否使用了HTTP代理。
查看IP端口
如果一個IP中有的端口大于10000,那麼該IP就十分可疑,需要進一步确認。
IPIDEA已向衆多互聯網知名企業提供服務,對提高爬蟲的抓取效率提供幫助,支持API批量使用,支持多線程高并發使用。
,