首先，区别对待爬虫和用户。
Seo 讨好爬虫的手段，就是让爬虫尽可能多浏览页面，尽可能长的停留在站点内，尽可能抓取具备相关性的页面内容，而又要避免过高的重复性。这就要求我们在页面中 适当设置多一点的链接入口，将有可能关联的内容都统一链接起来。增加蜘蛛的停留时间，和爬行距离(这里指的是跨越的页面数量)。
这里提供两点思路：
1， 为每个3级以后的页面内容设置tag属性。标签属性是一项很有代表性的相关性标识，一个页面或者说一篇文章，可能除了主关键词以外还会在内容上关联其他内 容，这就可以在相关性的基础上设置3个或更多标签，并导入标签分类页面。Wp站点基本上都会很好的利用这样一个功能，一些较好的cms系统也具备了公用的 或者独立的标签调用指令，可以很好的整合所有同类标签，并让蜘蛛在平行页面之间具备良好的流通性。
2， 内容识别关键词。
在 很多内容丰富的站点，都采用了自动识别页面内容特定关键词的功能。上图是一家医药网站点内，本人投递的一篇文章的摘要部分，在后台审核后，自动识别出了其 他页面相关联内容，并添加内部链接。这种植入文章内容的链接形式，既可以引导蜘蛛，也可以提示用户，哪里有相关关键词的关联、解释性内容。既提高了用户体 验，也能留住蜘蛛。
Ps:这种手法不要过度使用，关键词库内的数量不宜太多，过多的这种强制植入链接会有害用户体验，所谓过犹不及就是如此。而且 要对链接锚点进行醒目的差异化样式处理，切不可隐藏链接样式。如果用户需要，醒目可以起到指引点击的作用;如果不需要，也可以避免失误点击，引发反感。
其次，将爬虫引入迷宫，让客户直捣黄龙
虽说爬虫也越来越智能，但是他们的浏览可以说并没有目的性，一切只是程序设计的本能在趋势着它们不知疲倦的爬行下去。用户则不同，他们来到这个站点，一定是因为有他们需要的，或者说是期望能有所收获，目的性明确。
1， 在层级页面搭建丰富的垂直链接。上面一条可以说是在页面内容部分实现了对爬虫的有效“挽留”。但是无论是tag标签，还是关联词链接，所导入的必然都会是 平行页面，关于这点不难想见。如果要实现蜘蛛越界浏览，就必须建立丰富的垂直链接入口。处于页面设计的方便和不破坏页面主题content内内容的完整连 贯性，我们建议在footer部位植入上层目录和下级目录的链接入口。这样一个页面下来，能够将爬虫分流到更多的页面，让他尽可能的“迷失自我”。
2， 信息提示型的页面，或者说着陆页面在突出位置设置功能页面、独立信息页面的链接入口。根据网站的不同，有的是信息网站，知识分享类的，有的是功能性的。对 于前者，用户来了就是找知识找信息的，每个人都想用最短的时间，最少次数的点击找到自己需要的内容。而对于后者，用户是来使用网站功能的，自然直奔功能页 面更好，比如一些提供在线工具的网站，如奏鸣网等类似但不限于这种网站的例子。以上都是本着区别对待爬虫和用户的原则和提高用户体验的根本方略，需要建立 一个对于用户有直观指示作用的链接入口。让用户可以直捣黄龙，找到所需所求。