robots.txt协议屏蔽搜索引擎抓取动态URL链接

admin

如您的网站使用的静态URL，根目录下robots.txt内容可用以下代码代替

User-agent: *

Allow: /

Disallow: /member/

Disallow: /comment.php?

Disallow: /javascript.php?

Disallow: /*?*

Disallow: /desktop.php