joy 发表于 2016-5-15 16:36:01

为什么百度总是爬这个页面？？

本帖最后由 clqc58 于 2016-5-15 16:37 编辑

会员商铺做的二级域名，绑定的是company目录。



static/image/common/none.gif


11111.png (20.47 KB, 下载次数: 1)

下载附件


2016-5-15 16:34 上传





这是蜘蛛爬行的日志，为什么总是爬这个不存在的页面，造成大量的404，怎么办？？
每天爬几百次，晕死了。

买卖网 http://www.maicn.net换链接 权重2以上的来。

龙在天涯 发表于 2016-5-16 08:28:16


你可以网上搜一下 不让蜘蛛爬呢 或者做个重定向什么的

枪口的雨 发表于 2016-5-17 09:04:08


建议你做个重定向

斯达克 发表于 2016-5-18 15:50:10


看下是从哪 连接到这个页面的

斯达克 发表于 2016-5-18 18:01:20


这个应该是重定向的问题

枪口的雨 发表于 2016-5-19 09:21:17


枪口的雨 发表于 2016-5-18 15:50

看下是从哪 连接到这个页面的
这怎么看的到？
页: [1]
查看完整版本: 为什么百度总是爬这个页面？？