meta robots标签是页面head中meta标签的一种，用于禁止蜘蛛抓取的指令。http://www.yixiin.com/photo/
格式：<meta namen=”robots” content=”noindex,nofollow”>
含义：禁止所有搜索引擎索引本页面，禁止跟踪本页面上的链接。
NOINDEX：蜘蛛不要索引本页。
NOFOLLOW：蜘蛛不要跟踪本页上的链接。
NOSNIPPET：搜索引擎不要在搜索结果中显示说明文字。
NOARCHIVE：搜索引擎不要显示快照。
NOODP：搜索引擎不要使用开放目录中的标题和说明。
这些meta robots标签的属性，并不是在百度里面都能使用，只有NOINDEX：蜘蛛不要索引本页。NOFOLLOW：蜘蛛不要跟踪本页上的链接。可以再百度搜索引擎中使用。
值得注意的是：使用meta robots标签，不区分大小写，
<meta namen=”robots” content=”noindex”>http://www.yixiin.com/news/
这个标签虽然是告诉蜘蛛不要索引本页，但是还是可以传递权重的。