Categories


Tags


360搜索对Robots协议的支持

360搜索支持Robots协议的主要命令,以下为具体说明:

1. user-agent

360搜索各产品的爬虫user-agent为:

- 网页搜索 360Spider

- 图片搜索 360Spider-Image

- 视频搜索 360Spider-Video

2. Allow

站长可通过Allow命令指定建议收录的文件、目录 。

3. Disallow

站长可通过Disallow命令指定不建议收录的文件、目录。


Public @ 2019-06-30 16:09:34

301重定向的实现方法

实现301重定向有以下几种方法: 1. 使用Apache服务器提供的.htaccess文件:在Apache服务器中,可以使用.htaccess文件实现301重定向。您可以在该文件中使用如下代码:Redirect 301/oldfile.html http://www.example.com/newfile.html 2. PHP头文件:您也可以使用PHP头文件来实现301重定向。只需在您的

Public @ 2023-02-25 09:27:23

内部链接nofollow控制权重分布

nofollow内部链接不会传递权重给链接指向的页面,因此不会影响内部链接的权重分布。相反,它可以帮助控制页面的链接流量分配,避免流量浪费在不需要的页面上。如果一个页面有大量的被nofollow的链接,这些链接所指向的页面就不会得到与其他链接相同数量的流量。因此,nofollow内部链接可以作为一种有效的优化策略,帮助页面优化链接权重分配和流量分配。

Public @ 2023-05-29 02:50:08

robots使用技巧

以下是一些使用robots.txt文件的技巧和最好的做法: 1. 不要放弃robots.txt - 一些网站管理员没有robots.txt文件,因为他们认为这是保护网站的安全措施,但事实上它可能会影响搜索引擎爬取。 2. 维护一个更新的robots.txt文件 - 确保您的robots.txt文件不是过时的。如果您从网站上删除了某些页面或文件夹,请务必更新文件以反映更改。 3. 不要使用ro

Public @ 2023-05-28 16:00:31

什么是meta robots 标签?meta robots 标签的写法

网站上有些页面不希望被搜索引擎收录,我们可以使用robots的文件或者meta robots 标签。什么是meta robots 标签?meta robots 标签是页面head部分meta标签的一种,用于指令搜索引擎禁止索引(收录)本页内容。meta robots 标签的写法:<meta name=”robots”content=”noindex,nofollow”>标签的意义:禁止

Public @ 2012-07-08 16:09:26

更多您感兴趣的搜索

0.538259s