优化？ 1、精简URL：URL尽量精简，易读易懂，例如使用简短的关键字说明页面内容； 2、不使用动态参数：尽量避免使用动态参数或者复杂的URL参数； 3、去除多余的词汇：尽量删除不必要的词，保证URL精简，易读； 4、尽量使用短语汇：URL尽量采用短而且表明词汇类别，如名词、动词等； 5、构建层次：当有一系列相关的页面时，尽量将相关的页面构建成层次关系，这样势必对SEO搜索排名优化有一定的作用； 6、分类标识：在URL中尽量添加一个类别字段来标识，这样爬虫会更加清晰的知道这个页面的内容； 7、小写字母：尽量采用小写字母来构建URL； 8、精准关键字：URL中尽量加入精准的关键字，使搜索引擎能够更好的划分分类找到您的页面； 9、减少参数：尽量减少GET参数，使得每个URL都能被重用，以增加权重的效果。
"robots.txt"文件包含一条或更多的记录，这些记录通过空行分开(以CR,CR/NL, or NL作为结束符)，每一条记录的格式如下所示:"<field>:<optionalspace><value><optionalspace>"。在该文件中可以使用#进行注解，具体使用方法和UNIX中的惯例一样。该文件
nofollow 是HTML页面中a标签的属性值。这个标签的意义是告诉搜索引擎"不要追踪此网页上的链接或不要追踪此特定链接"。nofollow是HTML页面中a标签的属性值。它的出现为网站管理员提供了一种方式，即告诉搜索引擎"不要追踪此网页上的链接"或"不要追踪此特定链接"。这个标签的意义是告诉搜索引擎这个链接不是经过作者信任的，所以这个
问：搜狗抓取www跟没带www的首页内页这样影响大吗答：我们建议把顶级域名以301重定向的形式跳转到WWW域名上，每个站点都必须做到URL权威化，只允许一个标准链接！来源：A5营销
问题：求教url里index.php怎么去掉？回答：1、这个是网站URL设置问题，如果是静态的去URL结构里去设置，如果是伪静态的去设置伪静态规则；2、使用URL重写，可以使网站的URL屏蔽这类中间出现这个的URL；3、下图的截图原文来自：ThinkPHP中去除URL里的index . php。ps：这种网址也能正常被搜索引擎抓取爬行，不影响站点的收录来源：A5营销
