Categories

Tags

您的网站地图爬虫是自己写的吗？

james 提问于 1年 之前

请问Zac大佬，您的爬虫是自己写的吗，可以付费或者免费分享吗？

1 个回答

Zac 管理员 回答于 1年 之前

当然不是啊。生成网站地图是任何CMS的标配，或至少有插件可用。我博客用的WordPress，WordPress本身从5.5版本已经有内置生成sitemap.xml功能，也有很多插件，搜索wordpress sitemap.xml plugin可以看到一大堆。我博客的sitemap.xml是All in One SEO插件生成的。

如果CMS不能生成sitemap.xml就不要用了。

如果是自己开发的CMS，通常是从数据库中直接提取URL，应该不会是靠爬虫抓取生成的。

来源：SEO每天一贴 Zac 昝辉


 Public @ 2011-01-20 15:54:18

如何获知BaiduSpider在网站爬行的规律

要获知BaiduSpider网站爬行规律，可以使用如下步骤： 1. 根据网站日志或服务器访问日志找出BaiduSpider爬行的记录，记录包括爬虫访问的页面URL、访问时间、访问频率等信息。 2. 对记录进行整理与分析，得出BaiduSpider的爬行规律，例如爬虫的访问频率、访问时段、爬行深度等。 3. 使用数据分析工具对BaiduSpider的访问规律进行可视化呈现，例如制作访问频率图表

 Public @ 2023-04-13 08:00:27

关于小语种自建站的URL静态化问题

fanb 提问于 3年 之前Zac老师你好，关于小语种网站的URL静态化问题，我准备使用和网页关键字相同的URL，但是小语种中经常会有对应语种的特殊字符，比如西班牙语中的ú ，这样的字符，这样的字符用在URL中，想请问下是否会影响Google的收录呢 ? 谢谢老师1 个回答Zac 管理员 回答于 3年 之前URL中包含非英文单词或字符不会影响Google收录、排名。即使是非拉丁语系的字符，如中文，

 Public @ 2022-02-28 15:53:18

关键词排名没有了

为什么关键词排名没有了？有可能是以下几个原因： 1. 搜索引擎算法更新：搜索引擎每隔一段时间都会更新优化算法，使得关键词排名发生变化。 2. 竞争对手优化：如果竞争对手也在针对同一个关键词进行优化，而且优化程度比你更好，那么他们就会在排名上超过你。 3. 网站优化程度降低：如果你在优化上有所松懈，那么排名就会下降，因为其他网站在优化上比你更努力。 4. 网站被惩罚：如果你的网站采取了一些不

 Public @ 2023-04-24 20:00:16

更多您感兴趣的搜索

0.538679s