Robots协议（也称为爬虫协议、机器人协议等）的全称是“网络爬虫扫除规范”（RobotsExclusionProtocol），网站经过Robots协议通知查找引擎哪些页面可以抓取，哪些页面不能抓取 是查找引擎的一部分来定位和索引互联网上的每个可能答复查找恳求的网页，一般只在评论robots的HTML标签或许robots.txt文件的时分运用。
Alexa是一家专门发布网站世界排名的网站。以查找引擎发家的Alexa创建于1996年4月(美国)，意图是让互联网网友在共享虚拟世界资源的一起，更多地参加互联网资源的安排。Alexa每天在网上收集超越1,000GB的信息，不只给出多达几十亿的网址链接，而且为其间的每一个网站进行了排名。可以说，Alexa是当前具有URL数量最庞大，排名信息发布最翔实的网站。
大概因为最近做了这个中文博客，这几个月收到比较多的中文垃圾邮件。其中经常让我困惑的是推销所谓Alexa排名服务。去Google搜索了一下，提供这种服务的还真不少，有的号称能把网站做进Alexa排名前一百名，有的说前一万名，再靠后的还不做了。Alexa排名是根据装了Alexa工具条的电脑访问某网站的次数所得出来的网站流量排名。这些Alexa排名服务所提供的基本上都是通过作弊手段使你网站Alexa排名
