搜索引擎优化中不同的标签指令充当着不同的作用，通过各大指令站长可以像搜索引擎和用户展示不同的内容，合理的利用各指令可以帮助站长更好的运营站点，但如果不能明确的知道指令的作用，往往会给网站带来不利的影响。给大家分享常见些标签指令的作用。

　　Robots文件指令：蜘蛛来网站访问首先会访问robots文件，该文件一定要放置在根目录下，文件的名称必须都是小写，用于控制网站那些内容可以被蜘蛛访问或是禁止访问。如，可以阻止网站的后台管理、脚本语言、重复的内容索引、或是网站上一些非公开的页面等。在文件中被屏蔽的页面，蜘蛛不会进行抓取，更不存在任何权重上的传递。

　　Allow指令：关于allow指令能支持的搜素引擎只有谷歌、雅虎和Ask，使用该命令可以明确的告诉搜索引擎可以抓取站点中哪些目录和内页，如果网站中需要屏蔽大量的页面，无法在robots文件中一一列举，这时并可考虑使用allow指令，方便蜘蛛更快的对站点进行抓取。

　　Disallow指令：放到robots文件中可阻止搜索引擎访问站点中页面，网站在正式上线前可以使用disallow指令屏蔽搜索引擎蜘蛛对站点的抓取，以免不必要的抓取导致站点受惩罚。该指令是阻止爬行但是不阻止索引，如果其他站点中出现改网站中阻止的链接，

　　Canonical指令：此标签是由谷歌、雅虎最先推出的标签，用于识别和处理重复内容，规范网站版本信息，标签的运用也是比较简单的，属性类似于URL的301重定向，但本质上又是不同的。外表上是告诉搜素引擎所有其他版本的权重都归结到定义的URL上，但实际上并没有把不同版本的URL跳转到定义URL上。之后百度搜索引擎也开始支持Canonical标签，标签使用简单但不能写错误语法，否则造成搜索引擎错误判断网站内容。

　　Noindex标签：标记为noindex的页面将完全被搜索引擎排除，蜘蛛遇到网站添加noindex指令时，依然会对页面进行爬行，并且可以把权重传递给其他页面，但是爬行抓取的内容不会出现在搜索引擎索引中。不同于nofollow属性的是它依然会传递权重给链接到其他站点，但自身不会出现相应的排名，如网站中“网站地图”页面并不想获取一定的排名，但是希望此页面能传递相应的权重给内链站点，这时可以考虑添加noindex指令，并不是添加nofollow，因为这会阻止页面传递链接权重。

　　Noodp标签：此标签主要用于谷歌、雅虎、必应搜索引擎优化，当网站在被开放目录收录时，搜索引擎会抓取开放目录的标题作为网站title，而并不是抓取网站本事的title，抓取的标题不定是站长自己想要的，这时并可使用noodp标签强制要求搜索引擎抓取站点本身标题。
本文整理：饕餮源码网  http://www.taotieyuan.com