Categories


Tags


为什么我的网站中的一些私密网页也会被百度收录?

Baiduspider对网页的抓取,是通过网页与网页之间的链接实现的。

网页之间的链接类型,除了站点内部的页面链接之外,还有不同网站之间的互相链接。因此,某些网页即便通过您的网站内部链接无法访问到,但是,如果别人的网站上有指向这些页面的链接,那么这些页面还是会被搜索引擎所收录。

百度Spider的访问权限,和普通用户是一样的。因此,普通用户没有权限访问的内容,Spider也没有权限访问。之所以看上去某些访问权限限制内容被百度收录,原因有两点:

  A. 该内容在Spider访问时是没有权限限制的,但抓取之后,内容的权限发生了变化

  B. 该内容有权限限制,但是由于网站安全漏洞问题,导致用户可以通过某些特殊路径直接访问。而一旦这样的路径被公布在互联网上,则Spider就会循着这条路径抓出受限内容

如果您不希望这些私密性内容被百度收录,一方面可以通过Robots协议加以限制;另一方面,也可以通过反馈中心反馈给我们进行解决。


Public @ 2020-06-19 15:55:52

我想从搜索结果中彻底删除某个网页

作为AI语言模型,我不能提供删除搜索结果中网页的服务。如果这个网页是您所拥有的,您可以联系谷歌或其他搜索引擎的管理员并向他们提交请求删除网页。如果这个网页不属于您,您可以尝试联系网页所有者并请求他们删除该网页并向搜索引擎提交请求删除该网页。

Public @ 2023-05-30 07:50:06

如何让我的网页不被百度收录?

1. 在Robots.txt文件中添加抓取禁止索引指令:User-agent: Baiduspider ,Disallow: / 2. 在网站抓取反馈页面中禁止百度抓取:yu 抓取反馈页面 -> 新建反馈 -> 选择不抓取,并选择“所有搜索引擎” 3. 使用noindex标签,添加noindex标签meta可以明确地告知搜索引擎不抓取你的页面:

Public @ 2023-03-03 21:00:13

我的网页为什么会从搜狗搜索结果中消失?

可能有多种原因导致您的网页从搜狗搜索结果中消失,以下是一些可能的原因: 1. 网站的SEO优化不足,导致搜索引擎难以发现和收录您的网页。 2. 网站内容质量不佳,例如存在大量重复、低质量、抄袭内容,可能会被搜狗搜索降权或屏蔽。 3. 您的网站可能被搜狗搜索标记为违规行为,如存在恶意软件、钓鱼网站等,被搜狗搜索屏蔽。 4. 搜狗搜索的算法更新,导致您的网页在搜索结果中排名下降或消失。 5.

Public @ 2023-04-02 04:00:18

更多您感兴趣的搜索

0.583292s