自nofollow标签于2005年推出以来，其作用一直是指示搜索引擎不要追踪链接。这项功能主要用于避免垃圾邮件和链接操纵，因为某些站点会通过在其他站点上发布大量链接来提高其搜索引擎排名。nofollow标签的作用是告诉搜索引擎不要将链接计入其评估算法。 然而，随着SEO和数字营销的发展，nofollow标签的作用已经发生了重大变化。现在，nofollow标签不仅能够阻止链接被计入搜索引擎的排名算
nofollow标签是一种发送信号给搜索引擎，表明某个链接并没有推荐价值或者仍然需要被确认，从而在搜索引擎收录索引中减少该链接的收录的技术。当引用链接的页面需要降低权重，或者是垃圾链接以及狗仔站点被引用时，采用 rel=”nofollow” 就能限制搜索引擎把这些链接当做收录的对象，达到抑制搜索结果质量下降的目的。
Robots协议（也称为爬虫协议、机器人协议等）的全称是“网络爬虫扫除规范”（RobotsExclusionProtocol），网站经过Robots协议通知查找引擎哪些页面可以抓取，哪些页面不能抓取 是查找引擎的一部分来定位和索引互联网上的每个可能答复查找恳求的网页，一般只在评论robots的HTML标签或许robots.txt文件的时分运用。
robots.txt 是一个文本文件，用于指示搜索引擎爬虫哪些页面可以被抓取，哪些页面不应该被抓取。在建立一个网站时，可以通过 robots.txt 控制搜索引擎爬虫对网站的访问，以达到更好的SEO效果。以下是robots.txt的使用教程。 步骤1：新建 robots.txt 文件 在网站的根目录下，新建一个名为 robots.txt 的文本文件。 步骤2：编辑 robots.txt 文件
