[求助] 伪静态参数prevpage导致蜘蛛抓取重复
来源:    发布时间: 2017-11-02 10:39    次浏览   

帖子详情页的伪静态格式是:thread-{tid}-{page}-{prevpage}.html

其中“prevpage”参数代表所在该贴在当前版块的第几页,随着顶贴或沉贴prevpage参数肯定会变化,导致贴子的URL也会变化。

那么搜索引擎抓取的时候怎么办?一样的贴子,岂不是出现了多个URL?一贴多址,会出现重复啊