Categories


Tags


做了伪静态,为什么网站日志里抓取的还是动态地址?

song 提问于 3年 之前

网站上线三个多月了,上线前就做了伪静态,目前被收录近万的页面都是伪静态地址,线上没有动态地址的入口,为什么网站日志里抓取的全部都是动态地址呢?

网兼吧 回复于 3年 之前

用robots.txt禁止抓取呢

3 个回答

Zac 管理员 回答于 3年 之前

如果搜索引擎蜘蛛没有在什么地方看到动态网址,蜘蛛不会把静态URL改写成动态的,搜索引擎无法知道页面是动态的还是静态的,即使猜测是动态改写成静态的,它也不知道对应的动态URL是什么样的。所以蜘蛛一定是在什么地方读到了动态网址。

可能是网站上你没注意的什么地方出现了动态URL,或者服务器由于某种原因,静态URL会被自动改写、转向为动态URL,或者服务器日志自动匹配为动态URL?

stevezhou 回答于 3年 之前

这个要具体看,宽泛的有很多原因可能会造成这种情况。

在js调用动态地址,是可能会被蜘蛛识别到的。

或者非SEO人员做了动态地址的外链。

或者些其它原因,比如你伪静态地址的实现方式。

…

黄小泉 回答于 3年 之前

一般很多大型的网站会出现这类问题,特别是上几十万页面的网站,这说明你的动态URL没有处理完成,不够全面! 列举几个:

1、网站地图动态地址更换成伪静态地址,是否做了?(包括txt+xml+html格式的sitemap都检查下)

2、产品列表页面动态地址是否完善了?

3、搜索结果页是否做了? 如果都做了,恭喜您没有了哈哈。。

来源:SEO每天一贴 Zac 昝辉


Public @ 2014-10-02 15:52:46

百度在着手WPA项目,那以后WPA是不是将成为主流站?

夏羽 提问于 3年 之前最近看见百度在开展WPA站点技术,用Web技术挑战APP,那么如果技术成熟并且通过所有国际标准,那会不会成为主流站点?1 个回答Zac 管理员 回答于 3年 之前你说的是PWA(Progressive Web Apps)吧?PWA已经出现3年了,一直不温不火的。概念挺动人,可是没有太大动静。我个人觉得应该不会成为主流吧。PWA的一大卖点是像APP一样可以在用户手机上安装个快

Public @ 2013-01-16 15:53:40

关于博客分页noindex

博客分页是指将博客文章按照一定数量拆分成多个页面,例如每页显示10篇文章,当文章数量超过10篇时,会自动将文章分为若干个页码,方便读者逐一查阅。在SEO方面,博客分页可能会存在问题。因为同一篇文章被拆分成多个页面,每个页面的内容会有很大的重复率,如果不加以处理,容易被搜索引擎认为是非原创或低质量内容,导致排名下降。 为了解决这个问题,可以在博客分页中添加noindex标签,告诉搜索引擎不要将这些

Public @ 2023-06-18 02:00:21

请问新站如何快速提高权重和排名?

优化哥 提问于 3年 之前Zac老师,看了您的实战密码,感觉得收获挺多的。之前操作过些站,但都没坚持下去。我就想请问一下正常一个新站多久能把权重和排名做上去或者说新站如何才能快速提高权重和排名?另外,我最近帮兄弟公司做了个装修类的小企业站,能不能麻烦老师指点下?Reach Yang 回复于 3年 之前我觉得这种问题太大太空,没有实际意义,google优化指南都会给出很多事例。4 个回答Zac 管理

Public @ 2022-03-02 15:53:06

【直播干货】研发工程师直播专场QA集锦

一、网站抓取建设指南Q1:百度搜索会对新网站给予更高的抓取频次吗?A1:百度搜索会先识别网站内容的优质度,对内容优质的新站点在抓取频次上会有一定的倾斜,帮助内容得到更好的展现。Q2:如何让百度搜索知道我的网站是一个新站点呢?A2:主要有两种方式:1、通过百度搜索资源平台——资源提交工具来提交内容;2、在工信部进行网站ICP备案。Q3:百度搜索会调整对网站的抓取频次吗?A3:会的。百度搜索会基于网站

Public @ 2014-03-12 15:27:22

更多您感兴趣的搜索

0.495175s