Categories


Tags


做了伪静态,为什么网站日志里抓取的还是动态地址?

song 提问于 3年 之前

网站上线三个多月了,上线前就做了伪静态,目前被收录近万的页面都是伪静态地址,线上没有动态地址的入口,为什么网站日志里抓取的全部都是动态地址呢?

网兼吧 回复于 3年 之前

用robots.txt禁止抓取呢

3 个回答

Zac 管理员 回答于 3年 之前

如果搜索引擎蜘蛛没有在什么地方看到动态网址,蜘蛛不会把静态URL改写成动态的,搜索引擎无法知道页面是动态的还是静态的,即使猜测是动态改写成静态的,它也不知道对应的动态URL是什么样的。所以蜘蛛一定是在什么地方读到了动态网址。

可能是网站上你没注意的什么地方出现了动态URL,或者服务器由于某种原因,静态URL会被自动改写、转向为动态URL,或者服务器日志自动匹配为动态URL?

stevezhou 回答于 3年 之前

这个要具体看,宽泛的有很多原因可能会造成这种情况。

在js调用动态地址,是可能会被蜘蛛识别到的。

或者非SEO人员做了动态地址的外链。

或者些其它原因,比如你伪静态地址的实现方式。

黄小泉 回答于 3年 之前

一般很多大型的网站会出现这类问题,特别是上几十万页面的网站,这说明你的动态URL没有处理完成,不够全面! 列举几个:

1、网站地图动态地址更换成伪静态地址,是否做了?(包括txt+xml+html格式的sitemap都检查下)

2、产品列表页面动态地址是否完善了?

3、搜索结果页是否做了? 如果都做了,恭喜您没有了哈哈。。

来源:SEO每天一贴 Zac 昝辉


Public @ 2014-10-02 15:52:46

企业网站是否要对移动端单独解析一个二级域名m.xxx.com

米粉 提问于 3年 之前设定pc域名为www.xxx.com。目前移动端已经解析到m.xxx.com,但是在pc端访问该链接时候m.xxx.com页面效果和www.xxx.com 完全一致(网站自动识别设备属性显示相应效果)。我想 在pc访问m.xxx.com 时候能否显示为移动端访问时候的实际效果,这样避免和wap和pc完全重复,这样的问题如何处理会比较好。网站是否有必要对移动端单独解析一个二级

Public @ 2018-09-02 16:04:08

智能小程序没有主动提交过资源,为何会在未收录资源中有死链提示?

智能小程序没有主动提交过资源,为何会在未收录资源中有死链提示?除了开发者自己主动提交资源外,百度蜘蛛也会主动抓取资源。在开发智能小程序时,页面的加载速度必须符合规范,首屏内容应在1秒内加载完成。如果页面内容迟迟未加载完成,百度蜘蛛可能会抓取到空页面,从而判定页面为死链。来源:百度搜索资源平台 百度搜索学堂

Public @ 2011-12-16 15:27:23

对于原创文章生成这类工具,会对网站SEO有不利影响吗?

纪峰 提问于 3年 之前前不久在zac老师博客的评论下面看到有“原创生成工具”这种神器,好奇之下就百度了解了一下。发现此工具生成的文章具备几点基础:1、使用搜索引擎、原创文章检测工具,均显示原创文章(100%)2、生成的文章语句通顺,整篇下来跟一般的原创文章没两样可不可以把这类文章放到网站上填充内容,会对网站SEO有不利影响吗?3 个回答Zac 管理员 回答于 3年 之前如果工具生成的内容真的被搜

Public @ 2012-02-02 15:52:23

经常更新内容的网站关键词排名没有一点进展

曹素素 提问于 3年 之前我们网站是一个外贸网站,站内主要内容就是产品信息介绍,还有相关文章及实物图,最近网站产品图片更新,内容更新也差不多每天都有做(除去周末),为什么Alexa排名,关键词排名还是没有进展?都不知道下面应该怎么做了,求指教。1 个回答Zac 管理员 回答于 3年 之前不是经常更新内容就一定会获得搜索排名和流量。保持更新只是搜索算法中比较小的因素,而且要看网站主题,对新闻、时事、

Public @ 2017-09-01 15:53:45

更多您感兴趣的搜索

0.448431s