建站之星伪静态后的问题

good7758 · 发表于 2014-3-18 16:47:13

本帖最后由 good7758 于 2014-3-18 17:33 编辑

首先想问：建站之星伪静态的原理，用谷歌模拟蜘蛛抓取发现如图：

在研究网站iis日志的时候发现百度spider老是抓取index.php?_m=mod_product&_a=prdlist&cap_id=186&cat= 类似的url，还有mod_product-prdlist-cap_id-246.html 这样的url。
我的问题：1、建站之星的伪静态如何实现的（本人php是盲人，求指教）？
2、如何屏蔽百度蜘蛛抓取动态url或者怎样让他抓取规范的自定义url。

3、建站之星url为什么id加任意数字都能访问呢？http://www.bjmkat.com//index.php?_m=mod_product&_a=prdlist&cap_id=900000000000000000

lhlh · 发表于 2014-3-19 09:06:51

开启自定义后程序中robots.txt中已经屏蔽了搜索引擎对动态页面的收录。

good7758 · 发表于 2014-3-19 11:17:45

回复 2# lhlh

嗯，已经看到User-agent: * Disallow: /*?*

了这个参数，怪自己当初没有看清楚，就用自己新的robots覆盖了，我会持续关注iis日志，验证的，谢谢版主，咱们有QQ群吗？

lhlh · 发表于 2014-3-19 13:28:21

没有Q群的。