有关DISCUZ7.2 优化过程中的问题请教！ robots

dcm007

一，我这个论坛在向Google 百度开放之前做了论坛基础优化。  
robots.txt http://bbs.newhouse365.com/robots.txt  明明禁止 /redirect.php  ，/viewthread.php 收录。
在谷歌中site:域名，翻到最后一页提示：

2010-1-24 11:21

然后我点击“将省略的结果纳入搜索范围后再重新搜索。”，再翻到后面发现/redirect.php  ，/viewthread.php 都收录了。如：
http://www.google.cn/search?hl=zh-CN&client=aff-cs-maxthon&hs=WZt&newwindow=1&q=site:bbs.newhouse365.com&start=620&sa=N&filter=0

为什么会出现这个情况呢？

二，我的服务器环境是：iis+php+mysql 我的论坛URL 做了 伪静态处理。我在查看WEB访问日志的时候发现：

2010-01-23 00:38:42 GET /tag.php name=%C9%BD%D4%AD& 203.208.60.186 Mozilla/5.0+(compatible;+Googlebot/2.1;++http://www.google.com/bot.html) 200 0 0
2010-01-23 00:39:09 GET /tag.php name=%BD%F0%C9%AB& 203.208.60.186 Mozilla/5.0+(compatible;+Googlebot/2.1;++http://www.google.com/bot.html) 200 0 0
2010-01-23 00:43:35 GET /tag.php name=木业& 220.181.7.74 Baiduspider+(+http://www.baidu.com/search/spider.htm) 200 0 0

无论谷歌还是百度蜘蛛爬的都是 动态的地址。 请问这个是正常现象吗？  我以为他们应该爬行的记录应该显示我的伪静态地址。   

希望能得到站长的答复。谢谢！

SEO小工

1.robots.txt不是强制蜘蛛不能访问那些页面,这个协议只是一个声明,告诉SE不要收录那些页面.
google当然是遵守这个协议的,但是在省略的内容中会有一些禁止的页面,不知道为什么.
不过只要其它的收录正常就没问题.

2.虽然做了伪静态,但是/tag.php 这个链接还是存在的,没有robots.txt中禁止,所以还是会经常访问,但在搜索结果中显示哪些页面,就要看SE怎么处理和伪静态的重复页面了.