Categories


Tags


站点地图的构建技巧

重要页面

如果站点地图包含太多链接,人们浏览的时候就会迷失。因此如果网站页面总数超过了100个的话,就需要挑选出最重要的页面。建议挑选下面这些页面放到网站地图中去:产品分类页面;主要产品页面;FAQ和帮助页面;位于转化路径上的所有关键页面,访问者将从着陆页面出发,然后沿着这些页面实现转化;访问量最大的前10个页面;如果有站内搜索引擎的话,就挑选出从该搜索引擎出发点击次数最高的那些页面。

地图布局

站点地图布局一定要简洁,所有的链接都是标准的HTML文本,并且要尽可能多的包含关键字,不要使用图片来做站点地图里的链接,这样爬虫就不能抓取了。一定要使用标准的HTML文本来做链接,链接中要包括尽可能多的目标关键字。比如:可以使用“无公害除草剂、杀虫剂和杀菌剂”来代替“我们的产品”为标题。

用户习惯

用户一般会期望每个页面的底部都有一个指向站点地图的链接,可以充分利用人们的这一习惯。如果网站有一个搜索栏的话,那么可以在这个搜索栏的附近增加一个指向网站地图的链接,甚至可以在搜索结果页面的某个固定位置放置站点地图的链接。

把sitemap写进robots.txt里

在引擎爬虫进来抓取网页的时候,会首先查看robots.txt,如果首先把sitemap写进robots.txt里那么在效率上会大大提高,从而获得搜索引擎的好感。


Public @ 2013-11-27 16:11:49

玩转robots协议

2013年2月8日北京市第一中级人民法院正式受理了百度诉奇虎360违反“Robots协议”抓取、复制其网站内容的不正当竞争行为一案,索赔金额高达一亿元,这可以看做2012年下半年“3B大战”的继续。在此次索赔案件中,百度称自己的Robots文本中已设定不允许360爬虫进入,而360的爬虫依然对“百度知道”、“百度百科”等百度网站内容进行抓取。其实早在2012年11月初,针对双方摩擦加剧的情况,在中

Public @ 2019-05-13 16:09:21

站点地图创建方法

要创建站点地图,请遵循以下步骤: 1. 定义您的网站结构:确定您的网站有哪些页面和区域,以及它们之间的层次结构。这将有助于您确定要在站点地图中包括哪些页面和它们之间的关系。 2. 创建一个XML文件:使用XML语言创建一个文件,该文件将包含您的站点地图信息。您可以使用一个在线工具或者手动创建该文件。 3. 添加标记:向XML文件添加标记,以指示每个页面的URL和重要性。您还可以指定最后更新时

Public @ 2023-05-27 10:50:19

更多您感兴趣的搜索

0.615673s