如何判断IP是否是搜索引擎蜘蛛？通过linux系统下的host命令或者windows系统下的nslookup命令根据ip反向查找域名，根据反向查找的域名判断是否是搜索引擎的蜘蛛或者爬虫。
常用蜘蛛的域名都和搜索引擎官网的域名相关，例如：
1.百度的蜘蛛通常是baidu.com或者baidu.jp的子域名
2.google爬虫通常是googlebot.com的子域名
3.微软bing搜索引擎爬虫是search.msn.com的子域名
4.搜狗蜘蛛是crawl.sogou.com的子域名
判断IP是否是搜索引擎蜘蛛的核心Python代码
import socket def getHost(ip): try: result=socket.gethostbyaddr(ip) if result: return result[0], None except socket.herror,e: return None, e.message
常见搜索引擎蜘蛛（爬虫）的IP段如下表：
附带常见搜索引擎蜘蛛的IP段：
| 蜘蛛名称 | IP地址 |
|---|---|
| Baiduspider | 202.108.11.* 220.181.32.* 58.51.95.* 60.28.22.* 61.135.162.* 61.135.163.* 61.135.168.* |
| YodaoBot | 202.108.7.215 202.108.7.220 202.108.7.221 |
| Sogou web spider | 219.234.81.* 220.181.61.* |
| Googlebot | 203.208.60.* |
| Yahoo! Slurp | 202.160.181.* 72.30.215.* 74.6.17.* 74.6.22.* |
| Yahoo ContentMatch Crawler | 119.42.226.* 119.42.230.* |
| Sogou-Test-Spider | 220.181.19.103 220.181.26.122 |
| Twiceler | 38.99.44.104 64.34.251.9 |
| Yahoo! Slurp China | 202.160.178.* |
| Sosospider | 124.115.0.* |
| CollapsarWEB qihoobot | 221.194.136.18 |
| NaverBot | 202.179.180.45 |
| Sogou Orion spider | 220.181.19.106 220.181.19.74 |
| Sogou head spider | 220.181.19.107 |
| SurveyBot | 216.145.5.42 64.246.165.160 |
| Yanga WorldSearch Bot v | 77.91.224.19 91.205.124.19 |
| baiduspider-mobile-gate | 220.181.5.34 61.135.166.31 |
| discobot | 208.96.54.70 |
| ia_archiver | 209.234.171.42 |
| msnbot | 65.55.104.209 65.55.209.86 65.55.209.96 |
| sogou in spider | 220.181.19.216 |
相关资讯
如何判断IP是否是搜索引擎蜘蛛
如何判断IP是否是搜索引擎蜘蛛？通过linux系统下的host命令或者windows系统下的nslookup命令根据ip反向查找域名，根据反向查找的域名判断是否
来源：黑核动态ip代理
2019-04-11 14:56:39
换ip软件帮您解决ip被封烦恼！
换ip软件帮您解决ip被封烦恼！我想做互联网工作的基本上都需要换下ip吧，很多时候我们做推广经常被封账号，特别是同一个IP自问自答马上封你没商量，但是这些推广也
来源：黑核混拨IP网
2018-12-25 15:52:02
不知道怎么样修改ip地址可以用黑核混拨IP软件
现在做推广越来越难做了，动不动就被封号，要么就是一个IP只能登陆一个账号，这就尴尬了，如果只用一个账号推广根本不见效啊，或者说见效也效果不大，只能大批量的做推广
来源：黑核混拨ip加速器网
2018-12-25 16:28:24
黑核混拨IP加速器让你知道如何改变ip地址
被论坛禁言了？玩游戏作弊，被封号了？被人屏蔽IP是件很让人不爽的事情，平时正忙的时候被封禁，会有种天塌下来的感觉。如何改变ip地址成了我们比做的事情，不改变IP
来源：黑核混拨ip加速器网
2018-12-25 16:58:44
黑核混拨IP加速器轻松解决怎么修改手机ip地址问题
有些视频播放站很坑，一天只能观看几个视频就需要开通会员才能看了，但是我们又不想冲会员怎么办，那就需要修改手机IP地址了，但是怎么修改手机IP地址呢？不是谁都懂的
来源：黑核混拨ip加速器网
2018-12-25 17:39:01
还在找ip地址修改器吗？来试试黑核混拨IP加速器吧
国内ip地址修改器顾名思义就是转换自己的IP地址的一个工具或者一款软件，ip地址修改用哪些工具好处呢，因为工作或者个人需求，修改IP后可以注册一些限制IP注册的
来源：黑核混拨ip加速器网
2018-12-25 18:13:13
在国外想玩lol国服吗？来试试这个ip加速器吧
身在国外想玩下国服游戏是一件很痛苦的事情，因为网络延迟太高了，卡到让人怀疑人生的那种地步，有多卡呢？玩个游戏能卡出漫画的效果来，看着都着急啊。特别是玩游戏的时候
来源：黑核混拨ip加速器网
2018-12-27 17:07:17
如何判断代理服务器列表中的好坏？
如何判断代理服务器列表中的好坏？基本上一个较为正规或成熟的代理服务器平台，他们都会有专业的技术团队和客服售后，而且这些很容易使他们的综合水平考察范围，因此我们可
来源：黑核混拨ip代理
2019-03-28 16:40:53
选择代理服务器的3个要素
随着信息科学技术的快速发展，互联网越来越成为人们生活不可或缺的一部分，如今代理服务器在互联网中的地位也水涨船高，很多企业或个人都在借助代理服务器从中获利。接下来
来源：黑核动态ip代理
2020-01-15 14:38:15
数据采集爬虫代理ip的基本原理
在日常工作时做爬虫的过程中经常会遇到这样的情况，最初爬虫正常运行，正常抓取数据，一切看起来都是那么正常，然而一杯茶的功夫可能就会出现错误，比如403Forbid
来源：黑核动态ip代理
2019-07-24 10:49:40
推荐阅读
15
2019-11
为什么要使用代理服务器
随着互联网的发展，代理服务器越来越受欢迎
16
2019-01
http代理IP是什么？可以用在注册账号上吗？
http代理IP是什么在我们浏览网站的时
12
2019-06
网站爬虫防封IP用代理IP
在数据采集方面来说，爬虫想要采集数据，首
25
2019-11
ip代理池有效性的几种方式
一般人们用的IP代理全是付费选购的，由于
29
2019-10
代理IP知识之Pyspider爬虫框架
Pyspider是一个用python实现
07
2019-08
用动态IP解决分布式爬虫Access Denied的问题
网络爬虫工作室和爬虫爱好者都遇到过采集信
在线客服
.png)
