今天我们说的这个Robots META tag是用于告诉一个Web Robot某一个网页可否被索引以及可否跟踪其页上的链
接。该标记元已占据愈来愈重要的位置。而且，它也应用于没有对服务器顶级目录下的 robots.txt文件的控
制权限，有些搜索引擎现今已完全遵循Robots Meta Tag，如Inktomi. Robots Meta Tag的格式： The Robots
META tag放于后台HTML源代码的标头区(HEAD区)中。
我举一个例子：
<HTML>
<HEAD>
<META NAME="ROBOTS" CONTENT="NOINDEX,NOFOLLOW">
<META NAME="DESCRIPTION" CONTENT="THIS PAGE ....">
<TITLE>...</TITLE>
</HEAD>
<BODY>
...
Robot Meta Tag选项：
在一个Robots Meta Tag 中可使用的指令有四个：INDEX, NOINDEX, FOLLOW和 NOFOLLOW，以“,”分隔。
其中：
INDEX指令：表示Robot可以索引本页;
FOLLOW指令：表示Robot可以跟踪本页链接;
NOINDEX指令：表示拒绝Robot索引本页，但可跟踪该页上的链接;
NOFOLLOW指令：表示拒绝Robot跟踪本页链接，但可索引本页。
实例：
<META NAME="ROBOTS" CONTENT="INDEX,FOLLOW">
<META NAME="ROBOTS" CONTENT="NOINDEX,FOLLOW">
<META NAME="ROBOTS" CONTENT="INDEX,NOFOLLOW">
<META NAME="ROBOTS" CONTENT="NOINDEX,NOFOLLOW">
在一些关于Robots Meta tag的搜索引擎文章中提到说，预定义的缺省设置是INDEX和FOLLOW。然而对
Inktomi来说却并非如此。Inktomi的缺省项是INDEX和NOFOLLOW。
另外还有两个全局指令：ALL和NONE.
ALL=INDEX，FOLLOW：表示可以索引本页，且可跟踪该页链接;
NONE=NOINDEX，NOFOLLOW：表示不允许索引本页，且不允许跟踪该页链接。
目前国内在中文网站中用Robots META tag进行优化的还比较少，但在英文网站中已经扮演着越来越重要
的角色，由于最近国内著名的中文搜索引擎一直太调整算法，类似于Robots META tag这样的国际标签将越来
越广泛的被重视，
谢谢您看完这篇文章：）小弟是做服务器租用托管的，您如果有服务期租用托管或者虚拟主机域名注册的需求
请联系我。我们的企业资质、产品服务以及价格都是业内一流的。您可以浏览我们的网站www.59.cn了解一下
，也可以加我QQ 3294786 或是直接打我的手机 13700881944 全力为您服务.另外我公司现诚招代理，您只用
投资500元将立即拥有一个和59.cn完全一样网站，包括：拥有一个独立的网站系统，包括会员注册、域名注册
、虚拟主机、邮局即时开通等功能，并拥有跟 59.cn完全一致的系统功能。您只要在59.cn中有足够的预付款
，则您的用户即可以在您的网站进行任何即时交易。欢迎咨询：QQ：3294786