loghao日志分析蜘蛛抓取工具

最近网站降权,用LogHao检查了一下,确实有大量的降权蜘蛛的到来。不过话说回来,如何赶走这些蜘蛛? 我把垃圾页面都删除了,重新开始写原创了,多长时间会见效。

  最近网站降权,用LogHao检查了一下,确实有大量的降权蜘蛛的到来。不过话说回来,如何赶走这些蜘蛛? 我把垃圾页面都删除了,重新开始写原创了,多长时间会见效。

  loghao如何分析蜘蛛抓取首页次数呢?

loghao,蜘蛛

  如果你是iis日志,你的首页文件名称是“index.html”

  在搜索区域,第一个输入“ /index.html ”,第二个输入蜘蛛名称“Baiduspider”,或蜘蛛留下的网址。

  点击纠正即可。

  如果你是apache日志,第一个输入“ / ”即可,第二个按照iis日志输入。

  点击纠正即可。

  同样,如果你要分析其他页面的抓取情况,也可以在这里根据你的需求输入,然后纠正。

  你也可以点击其他权重蜘蛛,查看输入框的变化,根据输入框的变化,修改你要的个性分析数据。

  Baiduspider蜘蛛=220.181.108权重首页+123.125.71低权重+123.125.68沙盒+220.181.68沙盒+220.181.7预备抓取+123.125.66预备抓取+121.14.89新站考察+203.208.60网站异常+210.72.225巡逻

  123.125.68沙盒=404页面;

  220.181.68沙盒=404页面;

  123.125.71低权重=低质量内容;

  220.181.108权重首页=高质量内容;

  .html>.htm>.shtml>.php>.asp>.jpg>.gif>.png>.css>.js;

  200>304>301>302>404>500;

  220.181.108权重首页>123.125.71低权重>220.181.7预备抓取>123.125.68沙盒+220.181.68沙盒

  注册链接:http://www.loghao.com/#55

本站部分内容来源互联网,如果有图片或者内容侵犯您的权益请联系我们删除!

相关文档推荐