Categories


Tags


大量爬虫进入了我的网站

邵俊凡 提问于 3年 之前

zac大神,我发现在一段时间里有大量的爬虫进入我的网站,这有什么影响,这种行为会降低我网站的权重吗?会驱逐高质量的百度蜘蛛吗?我百度发现恶意爬虫会增加流量,增加网站负担。如果是,我该怎么应对?

2 个回答

Zac 管理员 回答于 3年 之前

假设你说的是非搜索引擎的恶意蜘蛛/爬虫,来采集内容之类的。

有大量恶意蜘蛛,对SEO没有直接影响,和搜索引擎眼里网站的权重一点关系都没有。搜索引擎并不会知道你网站上有没有恶意蜘蛛,也不会影响百度蜘蛛的抓取频率,完全没有关系。

当然,如果服务器不够强,或者恶意蜘蛛量太多,拖慢服务器,甚至页面打不开了,那肯定会影响真正搜索引擎的抓取。不过,其它任何因素导致的服务器响应慢,都会导致这个结果。

如果恶意蜘蛛数量在每天几万之内,服务器就出问题了,那说明需要换服务器了。如果超过这个量,可以屏蔽恶意蜘蛛(如果你确认是恶意的话)。

刘馨文 回答于 3年 之前

北京旅游景点:如果我这样发的话算不算一条外链,或者是不是引蜘蛛到我的网站啊?

Zac 管理员 回复于 3年 之前

网址已经删了。即使不删除也不是一个外链。

来源:SEO每天一贴 Zac 昝辉


Public @ 2014-05-27 15:53:56

中英文网站用同一域名,对SEO有什么影响?

问题:国内客户用户访问到中文内容,国外客户访问到英文内容,但进入的都是www.xxx.com,请问这种情况会影响百度SEO吗?回答:不建议使用混合的形式做显示,会100%影响到网站排名效果,而且是‘坏’的影响!国外域名可以使用子域名来做,这样就不会有影响了!来源:A5营销

Public @ 2016-10-04 15:25:28

如何获知BaiduSpider在网站爬行的规律

BaiduSpider是百度搜索引擎的网络爬虫,其爬行规律与其他爬虫类似,通常有以下几点: 1. BaiduSpider会按照网站的robots.txt文件中的规则来进行爬行,如果该文件中禁止爬取某些页面或目录,BaiduSpider会遵循规则进行爬行。 2. BaiduSpider的爬行频率通常是不固定的,它会根据网站的内容更新频率、网站的重要性等因素进行调整。 3. BaiduSpide

Public @ 2023-04-14 13:50:31

如何解决百度spider无法抓取的问题?

以下是一些可能的解决方案: 1. 检查您的网站是否有robots.txt文件,该文件禁止百度spider访问某些网页。如果有,请编辑此文件,以允许百度spider访问您要抓取的网页。 2. 确认您的网站是否正确配置sitemap.xml文件,并将其提交给百度搜索引擎。这将帮助百度spider更快地找到并抓取您的网页。 3. 确保您的网站没有被添加到百度的黑名单中。如果是,请联系百度解决此问题

Public @ 2023-06-11 07:00:11

搭建一个博客用哪个框架更好?

Alone 提问于 3年 之前ZAC老师您好,一路看着您的博客成长起来,让我学习到更多的不仅仅是SEO技巧本身,而是更好的理解SEO的价值在哪里,SEO的未来在哪里,并为此提前做好准备。我希望搭建一个个人博客,撰写原创的一些SEO文章。目前考虑到的有HEXO在内的一些静态博客,想请教下ZAC老师: 您的这个博客是用框架搭建的吗?是什么框架呢为了SEO,哪个开源的博客框架更好些?比如支持各类型的链接

Public @ 2009-08-26 15:52:39

更多您感兴趣的搜索

0.570628s