qq:800819103
在线客服,实时响应
qq群
在线客服,实时响应
客服电话
13318873961php如何验证代理ip?说到代理IP,经常使用网络的人都知道,代理IP在我们的生活工作中应用很广泛,那么HTTP代理IP验证呢?我们为什么需要对代理IP进行验证呢?是因为我们在网络中抓取到的代理IP数量很大,但是使用率取很低,往往不到十之二三,所以在我们使用代理IP对IP进行验证以剔除不能使用的代理IP,剩下的有效代理IP才能够提高我们的工作效率。
这里首先说一下大体思路,在我们抓取到的数据表中,要进行验证的话肯定是需要提取出来的,然后通过PHP中curl函数设置代理,再访问百度或者其他网站,通过返回的状态码是否等于200来判断代理IP是不是可以正常使用的。
由于代码太长,一些不必要的代码就不贴出来了,下面看看curl验证代理IP的核心代码。
//代理IP验证方法 function GetHttpStatusCode($proxy){ $curl = curl_init(); curl_setopt ($curl, CURLOPT_PROXY, $proxy);//使用代理访问 curl_setopt($curl,CURLOPT_URL,"http://www.baidu.com");//获取内容url curl_setopt($curl,CURLOPT_HEADER,1);//获取http头信息 curl_setopt($curl,CURLOPT_NOBODY,1);//不返回html的body信息 curl_setopt($curl,CURLOPT_RETURNTRANSFER,1);//返回数据流,不直接输出 curl_setopt($curl,CURLOPT_TIMEOUT,5); //超时时长,单位秒 curl_exec($curl); $rtn= curl_getinfo($curl,CURLINFO_HTTP_CODE); curl_close($curl); return $rtn; }
调用GetHttpStatusCode(代理IP地址:端口)方法就能返回该代理IP在访问百度首页时所返回的状态码,在需要的地方对状态码进行判断就能加以利用了。
相关文章内容简介
1 php如何验证代理ip?
php如何验证代理ip?说到代理IP,经常使用网络的人都知道,代理IP在我们的生活工作中应用很广泛,那么HTTP代理IP验证呢?我们为什么需要对代理IP进行验证呢?是因为我们在网络中抓取到的代理IP数量很大,但是使用率取很低,往往不到十之二三,所以在我们使用代理IP对IP进行验证以剔除不能使用的代理IP,剩下的有效代理IP才能够提高我们的工作效率。 ... [阅读全文]
最新标签
推荐阅读
31
2019-05
网络爬虫如何用代理IP?
Python爬虫层出不穷,所有网站都利用反爬虫制度,限制大批爬虫的浏览,因此Python爬虫必须利用代理IP实现破解限制,才可以顺利的爬取到数据。那么网络爬虫如何使用代理IP,在使用代理IP过
18
2019-01
网络无法连接?怎么刷新DNS服务?
我们的网络问题就像一个小世界,这儿世界里,问题就是生存着的“小生物”。通常它们不出来的时候,世界就是安定悠闲的,可是一但它们出来游览以后,我们就会遇到一个电脑小灾害。因为
03
2019-06
代理IP是网络营销的重要工具
黑洞代理IP是一种变相的ip伪装,在使用黑洞代理IP的时候,不仅可以更快速度的访问国内或国外的一些网站,还可以快速更换ip地址,这样的功能,对于营销行业而言,是一种能实现批量高效线
04
2019-01
导致网络爬虫采集数据被封禁的原因有哪些?
网络爬虫数据采集成为许多企业公司个人的需求,但正由于如此,反网络爬虫的技术也五花八门,像时间段受限制、IP限制、验证码受到限制等等,都可能会致使网络爬虫没法开展,因此也出现
热门文章