
aizhan做的很酷,我给很多朋友推荐过,个人评估是他有一个蜘蛛专门去抓百度搜索结果,按照目前aizhan关键词的覆盖率,应该抓取了几十万关键词(基于相关词扩展),每个关键词可能抓了不止一页,而且结合了百度指数数据。他的权值是按照 收录数和排名,以及指数数据评估的。
比较好奇的是,这么大的抓取量怎么规避百度安全系统的。

aizhan做的很酷,我给很多朋友推荐过,个人评估是他有一个蜘蛛专门去抓百度搜索结果,按照目前aizhan关键词的覆盖率,应该抓取了几十万关键词(基于相关词扩展),每个关键词可能抓了不止一页,而且结合了百度指数数据。他的权值是按照 收录数和排名,以及指数数据评估的。
比较好奇的是,这么大的抓取量怎么规避百度安全系统的。