Web代理是一种存在于网络中间的实体,提供各式各样的功能。现代网络系统中,Web代理无处不在。我之前有关HTTP的博文中,多次提到了代理对HTTP请求及响应的影响。今天这篇文章,我打算谈谈HTTP代理本身的一些原理,以及如何用Node.js快速实现代理。
HTTP代理存在两种形式,分别简单介绍如下:
第一种是RFC 7230-HTTP/1.1:Message Syntax and Routing(即修订后的RFC 2616,HTTP/1.1协议的第一部分)描述的普通代理。这种代理扮演的是「中间人」角色,对于连接到它的客户端来说,它是服务端;对于要连接的服务端来说,它是客户端。它就负责在两端之间来回传送HTTP报文。
第二种是Tunneling TCP based protocols through Web proxy servers(通过Web代理服务器用隧道方式传输基于TCP的协议)描述的隧道代理。它通过HTTP协议正文部分(Body)完成通讯,以HTTP的方式实现任意基于TCP的应用层协议代理。这种代理使用HTTP的CONNECT方法建立连接,但CONNECT最开始并不是RFC 2616-HTTP/1.1的一部分,直到2014年发布的HTTP/1.1修订版中,才增加了对CONNECT及隧道代理的描述,详见RFC 7231-HTTP/1.1:Semantics and Content。实际上这种代理早就被广泛实现。
相关资讯
动态IP地址的捕获及其应用
一、IP地址与IP地址的动态分配1.IP地址基本概念Internet依靠TCP/IP协议,在全球范围内实现不同硬件结构、不同操作系统、不同网络系统的互联。在In
来源:
2019-04-08 10:39:54
代理IP对爬虫的重要性以及Python3如何设置代理
对于从事互联网工作的朋友来说,代理ip并不是一个陌生的存在,如果你恰好是负责网络爬虫的相关工作,那么每天跟你打交道比较多的就是代理ip了。我们都知道,网络爬虫能
来源:黑核动态ip代理
2019-04-09 11:14:13
服务器空间换ip的正确操作及建议
服务器空间更换或者IP是一个网站管理者会与遇到的问题,但是IP作为网络中一个重要的识别标准,盲目地进行更换IP时不但可能会受到搜索引擎的惩罚,甚至会对业务照成一
来源:黑核动态ip代理
2019-04-09 16:12:44
代理ip对爬虫的重要性以及ip池的优质特性
大数据时代,网络数据非常多,我们即使要做个小小的数据分析,也是需要抓取非常多的网页数据来分析结果,这单靠人工获取数据是不现实的,因此大家都是使用各种采集器或者直
来源:黑核动态ip代理
2019-04-19 11:04:06
简述爬虫的工作原理及三大模块
传统爬虫从一个或若干初始网页的URL开始,获得初始网页上的URL,在抓取网页的过程中,不断从当前页面上抽取新的URL放入队列,直到满足系统的一定停止条件。聚焦爬
来源:黑核动态ip代理
2019-04-23 10:50:53
代理IP分类以及识别技术探讨
用户通常通过代理来突破限制,如局域网对上网用户的端口、目的网站、协议、游戏、即时通讯软件等的限制,网站对于IP的访问频率、访问次数的限制等;另一方面,通过代理也
来源:黑核动态ip代理
2019-04-25 09:50:33
设置代理服务器的方法及图解
所谓代理服务器就是一种关于服务器的安全功能,它一般是用来帮助我们连接国外的网络的。在我们日常的工作中,有的时候会需要用到外网,但要上外网就要设置代理服务器但是要
来源:黑核动态ip代理
2019-05-06 09:56:43
什么是ip代理软件?可以修改ip地址吗?
经常碰到朋友问,代理IP是做啥的,有什么用。我对他一顿解释,然后他还是云里雾里,好吧,可能是我口才不好,这里写文再解释下。代理IP对于很多人来说,用处很大,他们
来源:黑核混拨ip加速器网
2018-12-27 17:27:18
代理ip软件能帮助你实现优化网站
如今代理IP工具在营销领域,无论是主动式的发布推广信息,还是被动性反制竞争对手的恶意点击来说,都具有不可替代的作用。可细心的人们发现市面上代理IP的软件太多,如
来源:黑核混拨ip加速器网
2019-01-08 17:54:51
现在采集越来越难如何找到实用的HTTP代理IP
目前,中国的互联网大军正在不断壮大,各种各样依托互联网的新兴行业正在兴起,哪怕是很多传统行业,为了抢占竞争的制高点,也将跟友商之间的竞争搬到了互联网平台之上。对
来源:黑核混拨ip加速器网
2018-12-28 15:56:10
代理ip软件的原理是什么有什么用
互联网上网大家已经不在陌生,但是安全上网不被人这么容易追踪到隐私就不是所有人都知道的了,这就牵扯到了代理ip软件以及如何使用的问题。代理ip软件的工作原理是:当
来源:黑核混拨ip加速器网
2019-01-05 15:56:24
推荐阅读
Copyright © | 广州网连信息技术有限公司动态ip代理版权所有 备案号:粤ICP备18088888号-15 网站地图