404页面是客户端在浏览网页时，服务器无法正常提供信息，或是服务器无法回应，且不知道原因所返回的页面。据说在第三次科技革命之前，互联网的形态就是一个大型的中央数据库，这个数据库就设置在404房间里面。那时候所有的请求都是由人工手动完成的，如果在数据库中没有找到请求者所需要的文件，或者由于请求者写错了文件编号，用户就会得到一个返回信息：room 404 : file not found。404错误信息通常是在目标页面被更改或移除，或客户端输入页面地址错误后显示的页面，人们也就习惯了用404作为服务器未找到文件的错误代码了。当然实际考证传说中的room 404是不存在的，在http请求3位的返回码中，4开头的代表客户错误，5开头代表服务器端错误。
我今天来给大家详细讲解下，先了解几个概念1、robots只是禁止抓取，不是禁止收录2、另外还有nofollow的作用不是不抓取这个链接，是不从这个链接传递权重了解这2个概念后，我们再来讨论怎么处理这类收录问题：robots写正确的同时，不要在任何一家收录的网站发外链，友链，也不要主动提交百度，这样才可以保证不被搜索引擎收录，为什么呢？大家百度查一下淘宝，如图：按照道理淘宝写了robots怎么还是收
数据库驱动的网站需要将URL静态化，一直以来都是SEO最基本的要求，可以算是个常识性的东西。现在恐怕也没有不是数据库驱动的网站了吧。近几年SEO行业一致认为，URL中带2-3个问号不是问题，搜索引擎通常都能收录，尤其是权重高点的域名，更多几个问号也不是问题。但无论如何一般还是建议URL静态化。2008年9月份，Google站长博客发表了一篇讨论动态网址还是静态网址的帖子，却颠覆了这个说法。在这篇帖
设置一个好的自定义错误页面，可以增加网站的收录，挽留住一些可能因打不开的页面而放弃的客户，我司虚拟主机特别提供了自定义错误页面设置，包括404错误在内的所有自定义错误都可以设置。虚拟主机设置方法：http://www.west.cn/faq/list.asp?unid=810linux系统设置方法：第一步:在本地创建一个文本文件，在文本里面添加如下语句: ErrorDocument 404 /40
Apache 404 页面： 1. 创建一个名为“404.html”的文件，该文件将成为您的404错误页面。 2. 将此文件上传到您网站的根目录（或子目录，如果您希望针对特定子目录生成404页面）中。 3. 打开您网站的.htaccess文件并添加以下代码： ``` ErrorDocument 404 /404.html ``` 4. 现在，每当用户在您的网站上访问不存在的页面时，将自动重定
