Categories


Tags


未来SEO也许不用再操心爬行、抓取问题?

SEO每天一贴很少写关于必应Bing或雅虎Yahoo!的事,原因显而易见:他们那可怜的市场份额真不大值得写。

微软虽然一直对搜索不离不弃,投入重金和时间,但到目前为止,Bing在搜索市场从来都是个陪衬。Yahoo!就更甭提了,在收购了除Google、Bing以外的所有搜索引擎之后,Yahoo!竟然自废武功,把自己多年积累、收购的所有搜索技术彻底放弃了,雅虎网站的搜索功能转为使用Bing的技术 – – 不禁让人心里嘀咕:确定不是Google卧底干的吗?一个最重要的对手就这么没了?

不过Bing对SEO们一直都是挺友好的,而且Bing工程师们给SEO行业不少很有建设性的意见。比如,关于外链建设,我觉得最精彩的一句话就是某位必应工程师说的,大意是,最好的外链是那些你根本不知道其存在的外链。

必应大幅提高URL提交限额

一月底Bing站长博客发了一篇帖子,表示Bing站长工具URL提交工具做了升级,大幅提高站长可以提交的URL数目上限,从原来的每天只能提交10个,每个月最多50个,增长1000倍,现在每天可以提交10,000个,没有月上限。唯一的限制是,网站需要在Bing站长工具注册验证180天以上:

Bing提高URL提交上限

帖子还说了很有意思的一段话,如果以后搜索引擎按这个方向发展的话,SEO们未来可能不用再操心页面爬行、抓取的问题了:

We believe that enabling this change will trigger a fundamental shift in the way that search engines, such as Bing, retreive and are notified of new and updated content across the web. Instead of Bing monitoring often RSS and similar feeds or frequently crawling websites to check for new pages, discover content changes and/or new outbound links, websites will notify the Bing directly about relevant URLs changing on their website. This means that eventually search engines can reduce crawling frequency of sites to detect changes and refresh the indexed content.

翻译过来大意是:

我们相信这个变化会引发搜索引擎发现及抓取新内容(包括新建或更新的内容)方式的根本性变革。站长将可以直接通知Bing网站上有了URL变化,而不需要Bing通过监控RSS或频繁爬行来发现新页面。这实际上意味着搜索引擎在发现、更新索引内容时,可以降低对网站的爬行频率。

内容索引不再依靠爬行?

一直以来,我觉得SEO有三大难点:内容、内部链接结构、外链建设。其中,网站内部链接结构就是要解决搜索引擎有效爬行、抓取的难题,既要抓得全,抓得快,又要避免抓取不必要的内容,还得合理分配权重。越是大站,这个问题越难完美解决。做过大站的SEO一定都深有体会,不管怎样调整网站结构,都无法做到页面100%被索引。

必应的这篇帖子在告诉SEO们,以后很可能不用担心抓取的问题了,有了新页面,或者旧页面有了更新,直接提交URL就行了(通过站长工具或API),不必依靠Bing蜘蛛爬行抓取,实际上,Bing蜘蛛会大大减少爬行,却不耽误索引新内容。

后续SearchEngineLand对Bing搜索工程师的访谈证实,减少爬行,确实是Bing的目标。他们希望未来几年内,Bing不再依靠爬行来发现新内容。Bing认为,对网站爬行的方法低效、费资源,不如站长直接提交内容。Bing表示,提交URL是页面抓取的“很强”的信号,要想内容被快速索引,就赶紧用提交工具吧。

确实,大型网站,页面被抓取一遍,可能需要几个星期,甚至更长时间,那么网站上有新页面,或老页面内容有更新,要被抓取,也可能会有几个星期的延迟。提交URL是个更快的方法。

其实百度早就在做类似的事,在百度资源平台提交内容是快速抓取新页面的很好方法,小时级收录确实可以在几小时内收录,有时几分钟就收录。不过百度资源平台提交好像不支持老的但有更新的页面。

对SEO行业的潜在影响

如果Google以后也跟进采取这个方法,可能会对SEO行业产生不小的影响。搜索引擎发现、抓取、索引新内容的方式变得更加简单直接,SEO们调整网站结构的必要性和难度将大大降低。

不过也有潜在问题。比如,黑帽SEO们显然不会放过这个机会。以前垃圾内容靠爬行被抓取越来越困难,因为从一个页面到另一个页面的爬行就是个鉴别、过滤的过程。大量主动提交垃圾页面成为可能后,搜索引擎该怎么处理?

再比如,搜索引擎减少爬行,倒是节省资源了,但老的、不更新的页面被重新抓取的次数将大大减少,这会不会导致链接关系计算的不准确、不及时?顺便提一句,不知道为什么总是有人说链接对排名已经不重要了,其实依然很重要。

SEO的基本方法过去十多年没有大变化,但SEO依然是个不断变化的行业。

来源:SEO每天一贴 Zac 昝辉


Public @ 2019-10-14 15:54:26

谷歌SEO优化:揭秘Google排名的60个因素

做英文站,大家都希望自己的网站可以排在Google搜索结果首页。但是近年来,随着谷歌算法的不断更新,其频率已经到了令人发指的程度。以前还会有个名字,比如熊猫、企鹅、蜂鸟,现在更新频繁到连名字都懒得起了。难怪有网友戏称现在的SEO就是“玄学”。其实,并没有想象中那么复杂,只要理解谷歌产品的大方向,顺势而为就好。本篇分9个版块向大家介绍影响Google排名的60个因素,其中大部分内容是已经被证实的,有

Public @ 2011-09-01 15:55:04

网站被百度降权怎么办?

如果你的网站被百度降权了,可以采取以下措施: 1. 检查网站是否存在违规行为,如恶意SEO,抄袭内容等。如果有,及时纠正。 2. 对网站内容进行优化,增加原创性、新鲜度,以及与搜索词相关的主题。 3. 优化网站内部结构和页面链接,确保能够被搜索引擎顺利抓取和理解。 4. 提升网站的用户体验,包括网站速度、易用性等。 5. 建立高质量的外部链接,提升网站的权威度和可信度。 6. 提交网站

Public @ 2023-06-25 15:50:14

想做搜索引擎优化专家的十大原因

1. 搜索引擎优化是当前最有效的数字营销方式,优化能够让有志于开展电子商务的企业更好的进行品牌推广和销售。 2. 通过深入了解搜索引擎优化算法就能更好地推广自己的产品或服务,从而取得更多的顾客和市场份额。 3. 搜索引擎优化工作对于熟悉互联网行业的人来说是一个具有挑战性和开发性的职业,能够不断地拓展自己的知识和技能。 4. 优化工作可以让人不断地了解行业和市场的进展,可以知道最新的数字营销策

Public @ 2023-06-14 22:00:45

【专家专栏】SEO是一件100%能够做成功的事情

总有站长在做SEO的过程中觉得不得要领,认为SEO是一件很难的事情。今天我们邀请到了Mr.Xue与我们分享他关于SEO的一些心得,或许看完之后你也会感受到,SEO是一件100%能够做成功的事情。我说一句真心话, SEO真的是一件没有多少困难度的事情。只是我们的SEO方法路径跟搜索引擎设定的方法路径不同,才导致这种巨大的差异,这其实是心法问题。今天这篇文章,其实是在看罗振宇的过年演讲会看到,从中得来

Public @ 2021-08-09 15:27:34

更多您感兴趣的搜索

0.428850s