robots文件；nofollow标签：这个标签就是告诉搜索引擎不被抓取，也不会跟踪超链接，更不传递权重；meta robots标签；canonical标签
同志们好，我又来了，接着昨天的文章写（学习SEO留下的笔记之站内优化结构篇（一））今天下午特别困，天天对着电脑辐射很厉害啊，朋友们注意身体哦！
6.robots文件：我想大家对这个文件应该不陌生，我也就提一下，网上有很多对这个文件的详细讲解^_^，搜索引擎每次来我们网站都会先浏览robots.txt文件，如果你没有这个文件，那么搜索引擎就会抓取你所有网站的接，不过我个人意见，不管你不会还是不懂都尽可能的在网站根目录下建立robots.txt空文件，原因：因为有些服务器会出现，搜索引擎浏览robots.txt文件的时候不存在显示200代码，而不显示400错误，这样可能对搜索引擎产生一种误解。（你希望别人对你产生误解吗？）
格式：<域>：<可选空格><域值><可选空格>
User-agent:*
Disallow:/
禁止所有搜索引擎收录。
User-agent:*
Disallow:/ab/
Allow:/ab/cd/
不让蜘蛛抓取AB目录，但允许抓取AB目录下的CD目录下的内容。
还有记得切忌，robots.txt要小写。
7.nofollow标签：写法：<a href=”http://www.***.com/” rel=”nofollow”>锚文本</a>简单解释一下，这个标签就是告诉搜索引擎不被抓取，也不会跟踪超链接，更不传递权重。这个标签主要用在博客评论，留言板等地方。也有很多朋友用在网站的广告位地方，网络广告目的是为了提高曝光率和点击量，我们网站没必要给他广告做特殊待遇吧。
8.meta robots标签：这个标签主要就是告诉搜索引擎禁止索引本页面内容，但是可以跟踪页面上的链接，当然也可以传递权重。和上面的nofollow有点相似。
写法如下：<meta name=”robots” content=”noindex”>
noindex：告诉蜘蛛不要索引本页面。
nofollow：告诉蜘蛛不要跟踪本页面上的链接。
nosnippet：告诉搜索引擎不要在搜索结果中显示说明文字。
noarchive：告诉搜索引擎不要显示快照。
noodp：告诉搜索引擎不要使用开放目录中的标题和说明。
9.canonical标签：
这个标签类似于301内页转向，用户并感觉不到转向，而还是停留在原网址上，只是搜索引擎把他当做了301转向处理了，把页面权重集中于标签上的网页。通常情况下我们把canonical属性用在这种网页中，例如：某产品既属于分类a又属于分类b，那么2个不同网址在内容上仅仅是微差，我们实际上可以用 link的 canonical 属性把搜索引擎对这个文章的所有判断归结到一个网址上。这个标签有人说百度不支持，也有说支持的，这个大家讨论一下。更具体详细的解释：http://www.google.com/support/webmasters/bin/answer.py?answer=139394
今天介绍了一下标签，写的内容不是很充实，让大家了解一下，有个面熟，以后可能你会用到！
本文地址：https://www.pizijiang.com/tougao/108222.html
举报投诉邮箱：253000106@qq.com
微信扫一扫 
支付宝扫一扫 
