诺兰网 - 只为资源而生-分享永无止境 - 专注优质源码/电脑软件/活动资讯/技术教程分享

诺兰网投稿 1

怎么有效禁止虚假百度蜘蛛【亲测有效】

编辑:诺兰网 分类:SEO教程 首发 阅读量:27 次
扫码手机访问
0
摘要:我们在分析网站日志的时候,常常会发现一些莫名其妙的IP段,怎样分辨这些IP段是否为真正的百度蜘蛛呢?如果是虚假的百度蜘蛛我们能否进行禁止或者屏蔽呢?答案是可以的。 禁止虚假百度蜘蛛 先来介绍怎样分辨真假百度蜘蛛;首先,在网站日志中统计所有需要...

我们在分析网站日志的时候,常常会发现一些莫名其妙的IP段,怎样分辨这些IP段是否为真正的百度蜘蛛呢?如果是虚假的百度蜘蛛我们能否进行禁止或者屏蔽呢?答案是可以的。

禁止虚假百度蜘蛛

先来介绍怎样分辨真假百度蜘蛛;首先,在网站日志中统计所有需要查询的IP地址;

其次,对于非苹果电脑用户,按住【windows+R】快捷键,打开“运行”;

第一,在“文本框”内输入“cmd”,然后按Enter键,或者单击“确定”按钮!单击Enter键之后打开如下的对话框;

第二,在光标位置处输入nslookup 123.125.71.95,中间有一个空格;也可以先复制IP,然后在光标处右击,就会完成粘贴;IP输入完成后,按Enter就可以出现分析结果;可以看出这个IP是真正的百度蜘蛛。通过此方法,我们还可以发现谷歌蜘蛛、360蜘蛛、搜狗蜘蛛、神马蜘蛛等。

分辨真正百度蜘蛛的方法还有很多,大家可以自己百度一下并实操。如果你不想让某一个或某几个虚假百度蜘蛛爬取你网站的内容,我们就可以禁止或屏蔽这些IP,怎样屏蔽呢?有2种方法。

第一种方法:从服务器的防火墙上屏蔽IP,不过爬虫通常有很多IP,我们可以屏蔽爬虫的IP段;但是如果爬虫的IP段没有规律,那此种方法就不适用了。

第二种方法;.htaccess屏蔽虚假百度蜘蛛。有一些虚假的百度爬虫并不遵守robots规则,那我们还可以通过.htaccess来屏蔽它,代码如下:上图中htaccess屏蔽蜘蛛的方法是一种比较简单的方法,还有其他的一些方法可以使用,感兴趣的小伙伴可以尝试一下。

阅读时间:

字数统计:本文共有 699 个字

本文标题:《怎么有效禁止虚假百度蜘蛛【亲测有效】》发布于2022-11-6 09:14:23

版权声明:文章由《诺兰网》发布、原创转载请保留出处!

本文链接:https://www.nuolanyl.com/post-2406.html

上一篇
竞价排名为什么上不去?原因有6点,而大多数竞价只知道第1种
下一篇
网站是先有收录还是先有索引

免责声明:

本站提供的资源,都来自网络,版权争议与本站无关,所有内容及软件的文章仅限用于学习和研究目的。不得将上述内容用于商业或者非法用途,否则,一切后果请用户自负,我们不保证内容的长久可用性,通过使用本站内容随之而来的风险与本站无关,您必须在下载后的24个小时之内,从您的电脑/手机中彻底删除上述内容。如果您喜欢该程序,请支持正版软件,购买注册,得到更好的正版服务。侵删请致信E-mail:68407578@qq.com

同类推荐

最新文章

评论列表
签到

小姐姐视频

热门文章

随机推荐

标签云

SEO教程 怎么有效禁止虚假百度蜘蛛【亲测有效】
我们在分析网站日志的时候,常常会发现一些莫名其妙的IP段,怎样分辨这些IP段是否为真正的百度蜘蛛呢?如果是虚假的百度蜘蛛我们能否进行禁止或者屏蔽呢?答案是可以的...
扫描二维码阅读原文
诺兰网 January, 01
生成社交图 ×