james 提问于 1年 之前
请问Zac大佬，您的爬虫是自己写的吗，可以付费或者免费分享吗？
1 个回答
Zac 管理员 回答于 1年 之前
当然不是啊。生成网站地图是任何CMS的标配，或至少有插件可用。我博客用的WordPress，WordPress本身从5.5版本已经有内置生成sitemap.xml功能，也有很多插件，搜索wordpress sitemap.xml plugin可以看到一大堆。我博客的sitemap.xml是All in One SEO插件生成的。
如果CMS不能生成sitemap.xml就不要用了。
如果是自己开发的CMS，通常是从数据库中直接提取URL，应该不会是靠爬虫抓取生成的。
来源：SEO每天一贴 Zac 昝辉
浩业皮带机 提问于 1年 之前最近操作了好几个新网站，一上线能搜到全标题，上线没多久就全部降权，不知道是什么原因。反馈给百度站长平台说是堆砌关键词。我排查了，根本不存在堆砌关键词的情况。 不知道别人遇到过这种情况没有。如果严格按照百度官方的说法，那我们的网站首页就直接弄个公司全称就算了，也别做SEO了。我已经修改标题那么素了，还是降权，真找不到是什么原因。Z神帮看一下，感谢。1 个回答Zac 管理
，是指在某个博客网站上，将某一页以后的博客页面，在网站爬虫抓取过程中，添加一个noindex的网页头，从而避免这些博客文章被搜索引擎索引，这样有利于博客主页面被更多搜索引擎获取，提高网站搜索引擎流量。
SEO专家访谈系列刚刚完成第一篇。有的问题比较敏感，Matt Cutts也很忙，所以花了比较长时间。不过希望大家能觉得等有所值。访谈主要围绕中文搜索和搜索引擎优化。Matt Cutts和Google的“顶级中文反垃圾工程师”， Jianfei（朱健飞），回答了我的问题。当然很多问答并不局限于中文搜索和SEO，对所有SEOers都有参考意义。佳伦兄第一个猜对访谈对象。能否告知邮寄地址，我会寄件小礼物
答：备案对SEO优化没有直接的影响，但是未备案的域名有可能会被搜索引擎屏蔽，影响用户查找，降低网站的曝光率，也就是搜索引擎排名，影响SEO优化的效果。
