1、nofollow标签和tag标签
当我们不希望搜索引擎来抓取网站的某个页面时候,我们就可以用nofollow的标签来屏蔽掉搜索引擎的抓取,这个标签的意思就是让搜索引擎不要去追踪这个链接。Tag标签就是让网站的内容很容易被搜索引擎搜索。而读者可以通过文章标签更快找到自己感兴趣的文章。用好tag标签可以提高网站的权重和网站内容的收录。
2、网站的地图
一般情况下,网站的站点都是有网站地图,网站的地图有两种,一种是html,另一种就是xml地图。现在网上有很多的开源程序都是自带网站地图。网站地图是在网站的每一次内容更新的时候自动更新。如果能够合理的运用网站地图,对网站的页面内容的收录是有很大的帮助。搜索引擎就是通过网站的地图对网站的内容进行抓取的。
3、404页面
我们看到有很多的页面都没有去做404的页面,这种行为是很不友好的。当用户访问网站的页面时候,页面不存在,我们就应该告诉用户页面不存在的原因,或者是回到网站的首页,或者是给出相关的页面。要注意的是,需要在robots文件中屏蔽掉网站的404页面,让网站的404页面的返回状态码是404。