Categories


Tags


建立符合搜索抓取习惯的网站

编者按:前两周简要地给大家介绍了搜索抓取系统工作原理,根据该工作原理今天简要介绍一下如何建立网站是符合搜索引擎抓取系统习惯的。

1、简单明了的网站结构

Spider抓取相当于对web这个有向图进行遍历,那么一个简单明了结构层次分明的网站肯定是它所喜欢的,并尽量保证spider的可读性。

(1)树型结构最优的结构即“首页—频道—详情页”;

(2)扁平首页到详情页的层次尽量少,既对抓取友好又可以很好的传递权重。

(3)网状保证每个页面都至少有一个文本链接指向,可以使网站尽可能全面的被抓取收录,内链建设同样对排序能够产生积极作用。

(4)导航为每个页面加一个导航方便用户知晓所在路径。

(5)子域与目录的选择相信有大批的站长对此有疑问,在我们看来,当内容较少并且内容相关度较高时建议以目录形式来实现,有利于权重的继承与收敛;当内容量较多并且与主站相关度略差时建议再以子域的形式来实现。

2、简洁美观的url规则

(1)唯一性网站中同一内容页只与唯一一个url相对应,过多形式的url将分散该页面的权重,并且目标url在系统中有被滤重的风险;

(2)简洁性动态参数尽量少,保证url尽量短;

(3)美观性使得用户及机器能够通过url即可判断出页面内容的主旨;

我们推荐如下形式的url:url尽量短且易读使得用户能够快速理解,例如使用拼音作为目录名称;同一内容在系统中只产生唯一的url与之对应,去掉无意义的参数;如果无法保证url的唯一性,尽量使不同形式的url301到目标url;防止用户输错的备用域名301至主域名。

3、其他注意事项

(1)不要忽略倒霉的robots文件,默认情况下部分系统robots是封禁搜索引擎抓取的,当网站建立后及时查看并书写合适的robots文件,网站日常维护过程中也要注意定期检查;

(2)建立网站sitemap文件、死链文件,并及时通过百度站长平台进行提交;

(3)部分电商网站存在地域跳转问题,有货无货建议统一做成一个页面,在页面中标识有无货即可,不要此地区无货即返回一个无效页面,由于spider出口的有限性将造成正常页面无法收录。

(4)合理利用站长平台提供的robots、sitemap、索引量、抓取压力、死链提交、网站改版等工具。

如果大家对搜索抓取还有别的疑问,大家可以到[学堂同学汇][学习讨论] 《建立符合搜索抓取习惯的网站》讨论帖中发表自己的看法,我们的工作人员会关注这里并与大家进行探讨。

来源:百度搜索资源平台 百度搜索学堂


Public @ 2021-12-30 16:12:04

关于Sitemap

百度一直致力于将优质内容索引并呈现给搜索用户,因此百度站长平台推出了Sitemap工具,网站可通过该工具将优质资源主动反馈提交给百度站长平台,加强百度对优质资源的收录,优化收录效果。Sitemap(即站点地图)就是您网站上各网页的列表。创建并提交Sitemap有助于百度发现并了解您网站上的所有网页,包括百度通过传统抓取方式可能找不到的网页。您还可以使用Sitemap提供有关您网站的其他信息,如上次

Public @ 2011-06-13 16:11:59

301设置:一定要做的集中权重的方法

1. 确定风险限制:在设置好集中权重之前,首先应该确定一个风险限制,即股票组合投资的最大容差,通过筛选从而减少投资组合中股票偏离行业指数储备组合的可能性。 2. 集中权重:根据企业权重设定原则,最重要的是集中权重,即将一定数量的权利集中在一个行业板块或者一家企业上。 3. 调整权重:集中权重也可以细化到每一只股票的内容上,通过调整不同股票的权重,以达到透明度平衡,跨行业组合,从而使股票组合更

Public @ 2023-02-26 03:00:25

如何进行内容与结构优化

内容与结构的优化,在站内优化中占很大的比例,一般包括首页、栏目页内页和各种聚合页面的优化,分为以下四个方面:1、中间商品展示栏为所有商品图片增加alt"图片注释,注释直接调用商品名称即可。2、商品分类页在大型广告栏上方增加频道标题与简短描述般60~80个中文字为宜。为所有商品图片增加alt="图片注释,注释直接调用商品名称即可,这样做的好处是当图片不能完全显示的时候还能保持文字

Public @ 2015-04-10 16:12:07

网站结构优化:所谓F型结构是指什么

F型结构是指在网站内容展示的前沿区域,用户的阅读行为呈现出一个“F”字形状。具体来说,用户在浏览网页时,会先在页面顶部水平扫描,然后垂直下滑浏览左侧区域,最后再次水平扫描浏览右侧区域,形成了一个“F”字形的浏览路径。因此,F型结构的网站设计应该在页面顶部和左侧区域呈现最重要、最吸引人的内容,吸引用户的注意力,并且要注意深入挖掘左侧区域的内容,使用户得到更多信息。

Public @ 2023-04-11 20:50:49

更多您感兴趣的搜索

0.534497s