必应蜘蛛大量爬取网站要不要屏蔽?
时间:2022年06月26日
/来源:网络
/编辑:佚名
必应有流量吗?必应蜘蛛大量爬取网站要不要屏蔽?
必应蜘蛛可以通过站长统计里面查看是否有流量进来。也可以点击必应站长后台“搜索性能”找到关键词的点击次数,我感觉这里相对比较准确很多。
如果大家觉得必应蜘蛛太多了,自己的服务器扛不住,建议大家设置缓存,一般程序有插件支持的。如果实在扛不住的,只能通过域名解析那里可以直接屏蔽国外ip访问。
也可以通过必应配置那里找到“爬网控件”,设置网站收到最多流量的时间,可以选择自定义,或者挑选时间段。
必应在此时间段内捉取的内容将是最少的,尽可能降低对可用宽带的干扰。这一点比较不错,如果服务器配置低的话,可以设置一下。其实我觉得影响不大的,文章数少的博客站不用管这里!
实在不行话,就把网站地图提交去掉就行了,因为就怕一次性捉取里面的链接,我都是手动提交才会捉取最新文章,真羡慕那些搜索蜘蛛多得想扔的站长。
必应蜘蛛可以通过站长统计里面查看是否有流量进来。也可以点击必应站长后台“搜索性能”找到关键词的点击次数,我感觉这里相对比较准确很多。
如果大家觉得必应蜘蛛太多了,自己的服务器扛不住,建议大家设置缓存,一般程序有插件支持的。如果实在扛不住的,只能通过域名解析那里可以直接屏蔽国外ip访问。
也可以通过必应配置那里找到“爬网控件”,设置网站收到最多流量的时间,可以选择自定义,或者挑选时间段。
必应在此时间段内捉取的内容将是最少的,尽可能降低对可用宽带的干扰。这一点比较不错,如果服务器配置低的话,可以设置一下。其实我觉得影响不大的,文章数少的博客站不用管这里!
实在不行话,就把网站地图提交去掉就行了,因为就怕一次性捉取里面的链接,我都是手动提交才会捉取最新文章,真羡慕那些搜索蜘蛛多得想扔的站长。
新闻资讯 更多