产品使用及交流论坛

注册

 

QQ登录

只需一步，快速开始

返回列表
发新话题 回复该主题
查看: 3378|回复: 1

怎么百度还能抓到这样的链接呢？ [复制链接]

xcrane
头像

飞雨鹤

  • PageAdmin熟手
  • 524
  • 819
  • 2010-07-18
1#
t T
发表于 2010-09-01 23:38 |显示全部
/product.asp ClassID=7&page=1
2010-09-01 12:31:51 W3SVC1 192.168.10.2 GET /order/order.aspx prodid=76&language=cn 80 - 220.181.7.44 Baiduspider+(+http://www.baidu.com/search/spider.htm) 200 0 0
2010-09-01 12:31:51 W3SVC1 192.168.10.2 GET /member/index.aspx type=login&language=cn 80 - 220.181.7.101 Baiduspider+(+http://www.baidu.com/search/spider.htm) 200 0 0

我的站已经做了URL重写呀，怎么蜘蛛还能抓到这样的链接呢？我在电脑上是不能访问这些页面的呀，会提示错误，这是怎么回事呀
http://www.sh-qingliang.com
分享 转发
青良涂装设备  http://www.sh-qingliang.com
TOP
xcrane
头像

飞雨鹤

  • PageAdmin熟手
  • 524
  • 819
  • 2010-07-18
2#
t T
发表于 2010-09-01 23:41 |显示全部

百度、谷歌、soso都有这样的链接被抓去，返回200 ，说明正常抓去的
当时我最新的新闻，他们怎么不抓能，分析过后，他们抓去的都是25左右的，奇怪啦
有SEO高手能介绍一下是怎么回事
青良涂装设备  http://www.sh-qingliang.com
TOP
上一主题| 下一主题
返回列表
发新话题 回复该主题
高级编辑器高级编辑器