要避免搜索引擎蜘蛛爬取某个页面，可以在robots.txt文件中添加如下指令： User-agent: * Disallow: /index.htm 这样，所有搜索引擎蜘蛛都不会爬取网站的index.htm首页页面。注意，这并不代表该页面会从搜索结果中彻底移除，因为即使没有被索引，用户仍然可以在搜索结果中找到该页面。
什么是区域性搜索结果？区域性搜索是百度比较有特色的一个功能，简单地说，就是在使用百度搜索引擎的时候百度会调用你所在的IP地址从而将本地的一些网页的排名提前。这种功能其实对用户是有利的。区域性搜索排结果名机制特征并不是所有的关键词都会+触发区域性搜索结果，出现这种现象的关键词一般会有如下的两个特征：1、关键词有比较明显的区域差异，例如“SEO”，大多数比较大的城市都有做“城市+SEO”的网站，例如“
Google建议尽量避免在多个页面上使用完全相同的內容，因为它可能会影响你在搜索结果中的排名并可能被视为垃圾邮件。当你需要在不同页面上使用相似的內容时，可以使用不同的方法来表述，以便每个页面都有独特的价值。如果你必须再次使用某个页面上的內容，请使用指向该原始內容的链接。在公共域名或开放目录上发布内容时，应确保该内容不会影响你的站点的排名和声誉 。
1)、图像目录图像是构成网站的首要组成元素。跟着现在建站越来越便利，许多cms的呈现，真实做到了会打字就会建网站，而正是由于如此便利，网上呈现了许多的同质化模板网站，被重复运用，这样的网站查找引擎是必定不喜爱的，就算是你的网站被录入了，那你的作用也是很差的。若是你非要用这种网站的话，主张你大概在robots.txt文件中进行屏蔽，一般的网站图像目录是：imags 或许 img;2)、网站模板目录如
要避免搜索引擎蜘蛛爬取某个页面，可以在robots.txt文件中添加如下指令： User-agent: * Disallow: /index.htm 这样，所有搜索引擎蜘蛛都不会爬取网站的index.htm首页页面。注意，这并不代表该页面会从搜索结果中彻底移除，因为即使没有被索引，用户仍然可以在搜索结果中找到该页面。
