动态ip

>

代理ip软件

>

换ip软件

>

HTTP代理

>
Socks5代理
黑核动态ip代理
您的位置: 首页 > 新闻资讯 > 正文

Python代理IP检测匿名性有效性

发布时间:2019-12-02 14:39:15 来源:黑核动态ip代理

分享到

  作为一个python小白,到处踩坑是家常便饭,经常为了一个问题,花费几个小时,到处百度,谷歌找解决方案。有些问题对很多IT高手来说是小儿科的事儿,不屑去写,所以每次翻看了几十篇文章才终于找到自己想要的答案,运行成功的那一刹那,真的泪流满面啊。次数多了,也就有了想把遇到的坑写下来,留个纪念的想法。

  Python一大功能就是写爬虫,使用代理IP,是绕不过的坑,代理IP除了使用有效性以外,最重要的一点就是匿名性,碰到透明代理,把你的信息全部转发出去,就一点意义都没有了。

  以下这个检测方法原理是通过代理连接http://icanhazip.com/这个网站,通过网站返回的值与使用的代理IP做比较来确定是否匿名。

  连接icanhazip网站,返回IP地址,如图所示:

Python代理IP检测匿名性有效性

  此处的坑是:网站返回的信息除了代理IP,还有一行空行,需要使用strip()函数去除空行

  写法一

  代理IP来源:自建IP代理池

  数据格式:TXT格式

  每次提取数量:随机提取1个

  代码如下:

def confirm(self):
    url = "http://XXX.XXX.XXX.XXX:5010/get/" #自建代理IP池提取的IP,可以替换成自己的。
    r = requests.get(url).text  #获得代理IP
    print(r)
    proxy_info = r.split(':') #把IP和PORT拆分,生成列表
    print(proxy_info)
    proxy_ip = proxy_info[0] #从列表中,取第一个值作为IP
    proxy_port = proxy_info[1] #从列表中,取第二个值作为PORT
    thisProxy = "http://" + proxy_ip + ':' + str(proxy_port)
    # 使用取出的IP和PORT,重组成完整的代理
    print(thisProxy)
    requests.adapters.DEFAULT_RETRIES = 2 #设置请求数
    nnn=requests.get(url="http://icanhazip.com/",timeout=8,proxies={"http":thisProxy}).text
    #通过代理IP发出连接请求
    return_info=nnn.strip()
    #网站返回具体信息(IP),此处有坑!ICANHAZIP网站返回的信息除了IP,还会多一行空行,需要strip()函数去除空行
    print(return_info)
    if proxy_ip == return_info:
    #用代理IP(不含PORT)和返回的IP做比较,一致为有效,否则为无效
        print("代理IP:'" + thisProxy + "'有效!")
    else:
        print("代理IP无效!")

  执行结果如下:

image.png

  写法二:

  代理IP来源:某收费代理

  数据格式:JSON格式

  每次提取数量:随机提取1个

  代码如下:

def confirm(self):
    url = "http://XXX.XXXXX.XXXXXX.com/proxy/api/get_ip_bs?appKey=14737f96f82b4f4b94c0876f0f922262&count=1&expiryDate=0&format=1&newLine=2"
    r = requests.get(url)
    print(r.text)
    proxy_ip = r.json()['msg'][0]['ip']
    print(proxy_ip)
    proxy_port = r.json()['msg'][0]['port']
    thisProxy = "http://" + proxy_ip + ':'+ str(proxy_port)
    print(thisProxy)
    requests.adapters.DEFAULT_RETRIES = 3
    nnn=requests.get(url="http://icanhazip.com/",timeout=8,proxies={"http":thisProxy}).text
    return_info=nnn.strip()
    print(return_info)
    if proxy_ip == return_info:
        print("代理IP:'" + thisProxy + "'有效!")
    else:
        print("代理IP无效!")

  为了查看每步代码的正确性,多处使用print()打印结果,代码也未优化,只提供了思路,实际使用可以自行调整优化,希望能给大家带来帮助。


相关资讯

什么是ip代理软件?可以修改ip地址吗?

经常碰到朋友问,代理IP是做啥的,有什么用。我对他一顿解释,然后他还是云里雾里,好吧,可能是我口才不好,这里写文再解释下。代理IP对于很多人来说,用处很大,他们

来源:黑核混拨ip加速器网

2018-12-27 17:27:18

现在玩自媒体需要用到ip代理吗?

如今越来越多的人开始使用微博、今日头条等等各种自媒体平台,因此很多公司很多人都看到了这之中的商机和机会,并且借助自媒体平台来发展自己的生意,也因为自媒体的蓬勃发

来源:黑核混拨ip加速器网

2018-12-27 17:37:53

互联网工作中ip代理是不可缺少的工具

目前,中国的互联网大军正在不断壮大,各种各样依托互联网的新兴行业正在兴起,哪怕是很多传统行业,为了抢占竞争的制高点,也将跟友商之间的竞争搬到了互联网平台之上。对

来源:黑核混拨ip加速器网

2018-12-27 17:45:23

使用代理ip有什么好处?

现在,高匿代理ip时代已经到来,但是,还是有很多人不了解高匿代理ip到底有什么用,虽然随着网络科技的发展,网络对我们的生活带来了很多方便,也带来了更多的选择,网

来源:黑核混拨ip加速器网

2018-12-28 15:00:45

爬虫技术工程师为什么离不开ip代理

说到爬虫,自然离不开爬虫代理地址。爬虫是一门随着互联网大数据而应运而生的产物,它主要是为了在海量的网络数据中采集分析有效的数据而诞生的一门技术。无需多言,爬虫技

来源:黑核混拨ip加速器网

2018-12-28 15:24:23

现在采集越来越难如何找到实用的HTTP代理IP

目前,中国的互联网大军正在不断壮大,各种各样依托互联网的新兴行业正在兴起,哪怕是很多传统行业,为了抢占竞争的制高点,也将跟友商之间的竞争搬到了互联网平台之上。对

来源:黑核混拨ip加速器网

2018-12-28 15:56:10

什么情况下需要ip代理软件 ip代理软件用途

对于网络营销推广和SEO的朋友来说,数据抓取和模拟访问都是必备的工作,这两种方式都需要有大量的IP资源支持,很多用户在一些网站上面批量注册帐号、发布留言评论都会

来源:黑核混拨ip加速器网

2018-12-28 16:28:33

换ip软件帮您解决ip被封烦恼!

换ip软件帮您解决ip被封烦恼!我想做互联网工作的基本上都需要换下ip吧,很多时候我们做推广经常被封账号,特别是同一个IP自问自答马上封你没商量,但是这些推广也

来源:黑核混拨IP网

2018-12-25 15:52:02

如何检测代理IP匿名程度

做网络的基本都听过代理IP,不管是做CPA、点击、投票,或者网络爬虫,代理IP都是不可或缺的。代理IP从隐匿程度上区分,可分为透明代理、普通代理、高匿名代理三种

来源:黑核动态ip代理

2019-06-13 10:45:26

人性化的ip代理软件能使人工作更方便

国内的代理ip软件各种品种极为火爆,例如现在很多朋友都想知道那个换IP软件比较好用,所谓的最快最好用其实只是一个相对的概念,我们找到的不是最好的,而是最适合自己

来源:黑核混拨ip加速器网

2019-01-08 14:00:51

为什么使用python采集都使用ip代理软件

多线程、异步与动态代理使用代理IPweb爬虫在使用代理ip采集数据的时候,经常会碰到有反采集策略规则的WAF,使得本来很简单事情变得复杂起来,使得很多人无法获取

来源:黑核混拨ip代理

2019-01-10 10:34:30

在线客服
大客户VIP渠道
点击这里给我发消息
讨论QQ群
客服电话
13318873961