128101 发表于 2012-10-9 16:14:53

蜘蛛来网站爬行都是错误链接无法访问

提取两个日志看下:http://123so.net/search.php?kw=NLyOe4VzsNm07g&catid=&sort=&price=&page=   而且这个链接仔细看搜索的关键词还是乱码“搜索“帊枚趮””什么原因???
http://123so.net/shop.php?nick=xPvDysr3xuy9orXq&catid=&page=
http://123so.net/shop.php?nick=09DSu7Xjtc67tQ&catid=&page=

这些都是百度和soso蜘蛛抓取的日志,都是无效的链接啊,为什么不抓能访问的呢,是程序问题还是我网站部署问题呢,希望管理员赶快来解答下

admin 发表于 2012-10-10 00:24:12

上线后更改或重装后变更过“URL干扰码”引起的,搜索引擎缓存了更改前的URL

http://bbs.duoao.cn/show-96-1-1.html

128101 发表于 2012-10-10 11:48:32

以前装的免费版后来重装的vip版,不知道是不是这个原因,那现在怎么搞呢,就让蜘蛛爬错误的么,还是过几天就好了呢

admin 发表于 2012-10-10 13:15:51

以前免费版的URL是不带干扰码的,搜索引擎缓存了以前免费版的URL,这个没什么办法等时间久了搜索引擎更新掉缓存就好了
页: [1]
查看完整版本: 蜘蛛来网站爬行都是错误链接无法访问