建站之星产品帮助

标题: 为什么在线客户是个死链接?如何屏蔽搜索引擎对其抓取 [打印本页]

作者: share79    时间: 2011-7-14 09:38
标题: 为什么在线客户是个死链接?如何屏蔽搜索引擎对其抓取
本帖最后由 share79 于 2011-7-14 14:14 编辑

用Xenu软件检测到在线客户是个死链接:msnim:chat?contact=*******@hotmail.com
如何在robots.txt里将其屏蔽抓取啊?
作者: xqf    时间: 2011-7-14 13:15
请粘上网站以便查看
作者: share79    时间: 2011-7-14 14:10
请帮忙解决一下吧,网址是:www.forcewell.com
作者: xqf    时间: 2011-7-14 14:40
User-agent: *
Disallow: /死链接地址/
保存robots.txt 放在网站根目录试一下
作者: share79    时间: 2011-7-14 15:31
谢谢,已保存




欢迎光临 建站之星产品帮助 (http://bbs.sitestar.cn/) Powered by Discuz! X3.3