在国内利用Python从Internet上爬取数据时，有些网站或API接口被限速或屏蔽，这时使用代理可以加速爬取过程，减少请求失败，Python程序使用代理的方法主要有以下几种：
（1）如果是在代码中使用一些网络库或爬虫框架进行数据爬取，一般这种框架都会支持设置代理，例如：
import urllib.request as urlreq
#设置https代理
ph=urlreq.ProxyHandler({'https':'https://127.0.0.1:1080'})
oper=urlreq.build_opener(ph)
#将代理安装到全局环境，这样所有请求都会自动使用代理
urlreq.install_opener(oper)
res=oper.open("https://www.google.com")
print(res.read())
import requests as req
print(req.get("https://www.google.com",proxies={'https':'https://127.0.0.1:1080'}).content)
（2）如果使用的库没有提供设置代理的接口，但是底层使用了urllib、requests等库，可以尝试设置HTTP_PROXY和HTTPS_PROXY环境变量，常用的网络库会自动识别这些环境变量，使用变量设置的代理发起请求，设置如下：
import os
os.environ['http_proxy']='http://127.0.0.1:1080'
os.environ['https_proxy']='https://127.0.0.1:1080'
（3）如果上述两种方法都没有用，那么还可以使用一些可以监听、拦截和修改网络包的工具和库如（Fiddler、mitmproxy）来拦截http请求包并修改地址，达到使用代理的效果。
相关资讯
IP加速器的使用方法和简单问题解决办法
IP加速器，顾名思义就是加速IP，提升网络性能，降低网络延迟。黑核混拨ip加速器是一款ip量大速度快的加速器，非游戏外挂，可以放心使用。IP加速器的客户端设置简
来源：黑核混拨ip加速器网
2018-12-28 10:21:44
如何修改ip地址？修改ip地址的方法有哪些？
许多人在工作生活中经常需要用到换IP，比如帮朋友投票，刷单，做网络推广等等。大量的工作需要换IP，单单靠手动切换IP的方法比较耗时间，效果也不好，那么如何更换I
来源：黑核混拨ip加速器网
2018-12-29 13:48:40
简单实用的手机切换ip小方法
很多朋友在手机上做网络营销推广的话，很容易被平台的限制ip地址，造成很大麻烦，这个时候就需要我们经常更换下ip，以防止被限制。很多人对手机换ip感觉很陌生，不知
来源：黑核混拨ip加速器网
2018-12-29 17:49:11
如何修改ip地址 修改ip地址的方法有哪些
有时候工作必须要换IP，比如做推广需要到换ip,什么百度知道啊，天涯，知乎，搜搜问问，或者是淘宝刷浏览什么的，这些都是需要换IP才能工作，要不然很容易被封号，被
来源：黑核混拨ip加速器网
2019-01-02 10:19:26
爬虫IP被封的解决方法
由于公司项目需要，需要采集各类地图数据，还有一些大型网站数据。那么，爬虫IP被封怎么办呢？本文来告诉你爬虫IP被封的解决方法。IP必须需要多，比如ADSL。如果
来源：黑核动态ip代理
2019-04-11 15:07:00
爬虫被封IP的解决方法
很多专业的爬虫工作者都会觉得爬虫的技术没有那么深奥，所谓万变不离其宗，在复杂也只是那些个东西，但是要想真正的写好一套完美的爬虫程序又似乎没有那么简单。原因就在于
来源：黑核动态ip代理
2019-04-12 13:54:58
Android模拟器设置网络代理的方法
在服务器上启动模拟器的时候加了--http-proxy，但是不起作用。下面为大家提供四种Android模拟器设置网络代理的方法。一：将网络连接代理设置写入配置数
来源：黑核动态ip代理
2019-04-12 14:57:45
什么是ip代理软件？可以修改ip地址吗？
经常碰到朋友问，代理IP是做啥的，有什么用。我对他一顿解释，然后他还是云里雾里，好吧，可能是我口才不好，这里写文再解释下。代理IP对于很多人来说，用处很大，他们
来源：黑核混拨ip加速器网
2018-12-27 17:27:18
网页代理是不是socks代理、HTTP代理、VPN代理
网页代理是什么？一般网页代理页成为在线代理。在线代理英文全称是(WebProxyServer)。代理服务器其功能就是代理网络用户去取得网络信息。形象的说：它是网
来源：黑核混拨ip加速器网
2019-01-07 14:07:48
为什么使用python采集都使用ip代理软件
多线程、异步与动态代理使用代理IPweb爬虫在使用代理ip采集数据的时候，经常会碰到有反采集策略规则的WAF，使得本来很简单事情变得复杂起来，使得很多人无法获取
来源：黑核混拨ip代理
2019-01-10 10:34:30
互联网工作中ip代理是不可缺少的工具
目前，中国的互联网大军正在不断壮大，各种各样依托互联网的新兴行业正在兴起，哪怕是很多传统行业，为了抢占竞争的制高点，也将跟友商之间的竞争搬到了互联网平台之上。对
来源：黑核混拨ip加速器网
2018-12-27 17:45:23
推荐阅读
在线客服
.png)
