windows系统怎么样查搜索引擎蜘蛛IP
查看网站日志是站长每天必不可少的工作之一,查看日志可以清楚的了解网站每天的具体运行情况,访问网站的IP情况、访问了哪些页面、User-Agent信息、浏览器信息、搜索引擎等情况,可以说学会分析或者查看网站日志,是站长必备的技术和日常的工作之一,便于更好的维护服务器和网站Seo优化,那么在查看网站之后如何确定某一个IP是否是某一搜索引擎蜘蛛呢?笔者的电脑是win10操作系统,分享下两种在windows操作系统下nslookup查询IP是否为搜索引擎蜘蛛的方法。
第一种Dos Cmd命令行下Nslookup查询:
直接将网站日志中Baiduspider的IP拿来查询了一下,结果返回的是 baiduspider-220-181-108-152.crawl.baidu.com,带有baiduspider头后接IP地址带百度二级域名的格式,这样的就是百度搜索引擎蜘蛛。另外在网站日志中发现了116.179.37.0/24这个IP段的IP爬取网站数据比较频繁,结果查询后发现这个IP段全部为百度蜘蛛的IP。
第二种直接在Dos运行中输入Nslookup查询:
其实第二种法,是Dos中直接执行了Nsloop命令,比方法一简化了很多,进入命令行后直接输入IP就可以查询是否是搜索引擎蜘蛛了。
经过查询不是搜索引擎蜘蛛,但是又带有搜索引擎蜘蛛头的IP,这个时候很大概率就是对User-Agent进行了伪装,来网站采集内容或者是收集网站信息和漏洞对网站进行攻击,另外还有一种就是站长工具也会带有搜索引擎的User-Agent信息,所以这个时候我需要在核对无误后,对这些伪装的IP进行屏蔽。
可能喜欢
-
Typecho详细图文建站教程
Typecho是一款PHP博客程序,相比于WordPress,Typecho显得更加的轻量级和简洁。现在越来越多的人倾向于用Typecho来搭建个人博客,而...
建站教程 2023-05-30 -
解决阿里云服务器网站无法安装问题的实用方法
在使用阿里云服务器搭建网站的过程中,经常会出现一些安装问题。如果你遇到了这样的问题,不要惊慌,本文将为你提供一些实用的解决方法。以下是几种经常出现的阿里云服务器...
建站教程 2023-05-11 -
ubuntu搭建ftp服务器详细图文教程
今天小编就为大家分享一篇关于图文详解Ubuntu搭建Ftp服务器的方法(包成功),小编觉得内容挺不错的,现在分享给大家,具有很好的参考价值,需要的朋友一起跟随小...
建站教程 2023-05-10 -
两个免费特别稳定的二维码生成API接口
搜狐视频api接口链接:https://my.tv.sohu.com/user/a/wvideo/getQRCode.do?text=此处为你的链接如果要设置二...
建站教程 2023-05-01 -
非常实用的鼠标移动到相应位置,下拉显示全部内容代码
今天分享一个非常实用的鼠标移动到相应位置,下拉显示全部内容代码。css代码:.list-article li a:hover{color:&...
建站教程 2023-04-26 -
百度Api推送提示{“error”:401,”message”:”site error”}错误
网站数据进行了百度Api推送和神马Api推送,神马Api自动推送成功提示200状态码,而百度Api推送却提示{“error”:401.”message”:”si...
建站教程 2023-04-21