Categories


Tags


Google的奇怪规则:URL不能以.0结尾

前两天SEOMoz发现和解决了一个很奇怪的Google收录问题。

SEOMoz有一个网页,是关于他们举办的Web 2.0大奖(Web 2.0 Awards)。URL是:

http://www.seomoz.org/web2.0

这个奖在网上还挺受欢迎,链接很多,URL是PR7。而且一直以来在Google搜索”Web 2.0 Award”时都排在第一位。

但前几天SEOMoz发现搜索Web 2.0 Award时,这个页面从Google消失了。排在最前面的是一个更深一层的页面。

SEOMoz也弄不清是这么回事。所以Rand联系了Google里面认识的人,Google的人建议最好把URL改成不以.0结尾。

注意看SEOMoz这个页面URL,后面没有跟着一个斜线/。在大部分情况下,URL结尾没有典型文件扩展名如.html,.php等时,URL会被当作目录,目录名后面没有斜线时,服务器会在后面自动加上一个斜线。比如SEO每天一贴,如果用户直接打开:

https://www.seozac.com/

或者有其他网页链接到上面这个URL,服务器都会自动做一个301转向到:

https://www.seozac.com/

由于某种原因,SEOMoz的这个URL并没有做301转向自动在目录后加上斜线,也就是说URL还是以.0结尾:

http://www.seomoz.org/web2.0

浏览器和蜘蛛就把这个URL当作了文件名,这个文件的扩展名(或者说文件类型)是.0。而.0文件Google拒绝收录,就像.exe文件一样。

SEOMoz做了很多调查,发现页面没被收录问题确实是因为这个以.0结尾的URL。在网上找不到以.0结尾的文件被收录在Google数据库中。像以下这些文件在Google都没收录,但雅虎有收录:

en.wikipedia.org/wiki/Windows_1.0

en.wikipedia.org/wiki/Web_2.0

http://en.wikipedia.org/wiki/Die_Hard_4.0

drupal.org/drupal-5.0

keznews.com/3799_Vista_Transformation_Pack_8.0_Final_-_VTP_8.0

en.wikipedia.org/wiki/BASIC_8.0

drupal.org/drupal-6.0

en.opensuse.org/OpenSUSE_11.0

www.shopping.com/xGS-Illustrator_11.0

www.mythtv.org/wiki/index.php/Opensuse_11.0

www.shopping.com/xGS-Suse_9.0

en.wikipedia.org/wiki/Mac_OS_X_10.0

en.opensuse.org/Bugs:Most_Annoying_Bugs_10.0

而非常相似的下面这些URL,Google就有收录:

en.wikipedia.org/wiki/Web_2

drupal.org/drupal-5.0-beta1

http://keznews.com/3799_Vista_Transformation_Pack_8_0_Final_-_VTP_8_0

drupal.org/drupal-6.0-beta1

www.mythtv.org/wiki/index.php/Opensuse_10.3

www.mythtv.org/wiki/index.php/Opensuse_10.2

en.opensuse.org/Bugs:Most_Annoying_Bugs_10.3

比较一下这两个URL,域名,链接深度等几乎都没什么区别,唯一的区别就是URL结尾的不同:

en.opensuse.org/Bugs:Most_Annoying_Bugs_10.3 收录

en.opensuse.org/Bugs:Most_Annoying_Bugs_10.0 没收录

SEOMoz发现了这个问题后,发了一篇帖子。很快Matt Cutts也回了篇帖子,做出了回复和调整。Matt Cutts说,是因为连到URL

http://www.seomoz.org/web2.0

的链接足够多时使Google认为它是应该被收录的那个URL版本,但Google又不收录.0文件,所以SEOMoz的这个页面被删除了。

Matt Cutts还提到一个小技巧,要检查某种文件名是否会被Google中被收录,有一个很简单的指令如:

filetype:exe

上面的搜索结果可以看到,没有直接以.exe结尾的URL被收录,也就是说.exe文件Google不收录。

同样.0文件Google一直到两天前还都不收录。不过Matt Cutts看到SEOMoz的这个帖子后,与工程师重新审视了一下现在以.0结束的URL,肯定也不都是垃圾页面(可能以前大部分是),所以对Google收录算法做了一定调整,重新开始收录.0文件。其实很多网页以.0结束,并不是因为文件类型,而是像SEOMoz那样,在想写Web2.0时,很巧合的以.0结尾而已。

现在搜索一下的话,已经可以看到SEOMoz的这个Web2.0奖网页已经重新被收录了:

第一,这种细节问题,不碰到还真想象不到。

第二,认识人好办事。

第三,Google经常也从善如流。

来源:seo每天一贴 Zac 昝辉


Public @ 2013-10-31 15:34:40

如何判定网站降权?网站被降权的6种表现

1、关键词排名下降:网站的关键词排名变动很大,原先排名靠前的关键词现在难以排名前几页。 2、流量下降:进入网站的自然流量明显减少,访问量和访问时长都有所下降。 3、收录量下降:搜索引擎之前收录的网站页面或文章逐渐减少,有些已经不再被搜索引擎收录。 4、页面链接减少:其他网站对你的页面链接减少,原本链接到你的页面的其他网站也不再链接到你的页面。 5、抓取频率降低:搜索引擎对你的网站页面的抓取

Public @ 2023-06-14 23:50:26

人工智能在搜索算法中的应用

人工智能在搜索算法中的应用非常广泛,尤其是在搜索引擎领域,例如谷歌、百度等搜索引擎在搜索过程中就应用了人工智能技术。 以下是人工智能在搜索算法中的应用: 1. 语义搜索:传统搜索往往只是通过关键词匹配来查找相关的网页,但语义搜索则通过对用户的查询进行解析,理解用户的意图和背景,从而提供更加准确和个性化的搜索结果。 2. 推荐算法:人工智能技术可以通过分析用户的搜索历史,了解用户的偏好和喜好,

Public @ 2023-03-31 17:00:46

原创的文章被同行抄袭,该怎么办?

如果您发现自己的原创文章被同行抄袭,您可以采取以下措施: 1.直接联系抄袭者 您可以通过邮件、短信或电话等方式与抄袭者直接联系,并提出您的投诉。在联系时应该保持冷静,表达您的观点和愿望,提出合理的解决方案,例如要求抄袭者删除抄袭的文章或支付版权赔偿等。 2.向抄袭者所在的媒体机构或学术组织反映 如果抄袭者所在的媒体机构或学术组织是一个有正规组织的机构,您可以通过向该机构反映来解决问题。您可

Public @ 2023-06-03 05:50:13

网站的内容百度为什么不收录?

网站的内容百度为什么不收录?百度没有收录网站的内容,有可能是因为是新网站。百度蜘蛛目前抓取途径两种,第一种是主动抓取,第二种是在百度站长平台的链接提交工具中获取数据。如果网站的内容长时间没有被百度收录,建议使用主动推送的功能,主动推送首页数据,有利于内页数据被抓取。当然这些都是比较针对新站没有被百度收录的解决方法,那么如果你不是新站的情况下,导致没有被收录的原因有哪些呢?百度不收录网站的内容原因分

Public @ 2021-01-08 15:55:37

更多您感兴趣的搜索

0.457217s