当前位置:秋叶网络博客 SEO优化 ◊ WordPress文章不收录和收录慢的原因

WordPress文章不收录和收录慢的原因

作者:秋叶 发表时间:2015年1月11日

用过Wordpress的博主很多都有这种感觉:为什么我发布的文章百度迟迟不收录?万一我辛辛苦苦写的原创文章被哪个丧心病狂的人复制走了且不带链接怎么办?要是百度先收录了他的文章而后收录我的文章,那我辛辛苦苦写的文章不会被百度认为是抄袭的吗?对于这一系列的问题我该怎么办?相信很多站长都有想过这种问题,并为这种问题感到苦恼。

今天来探讨一下这些问题,首先标题写的是Wordpress文章不收录的原因,这本身就是错误的,或者说是有“漏洞”的,那为什么有漏洞的标题秋叶还要写呢?因为这个标题跟写这篇文章有关,可以吸引读者进来观看,如果你也是看标题点进来的,看完这篇文章一定会解决你的这些问题。

为什么说Wordpress文章不收录是错误的论点?因为很多站长看文章收录与否是直接在百度搜索文章的链接,如果搜到没有的话就认为百度没有收录。很显然这是没有放出来,并非没有收录。对于像文章的原始出处问题,你能想得到,百度也能想得到,并会有对应措施杜绝这种文章原始出处的争议。只要你的网站会被百度频繁来抓取首页的话,基本不会出现这些问题。因为只要它爬取了,就会把爬取的页面中的所有超链接纳入数据库,这其中也就包括你发布的新文章。

如何查看百度蜘蛛是否爬取了我的网站,只需要关注最近访客就行了,看cnzz统计是看不到蜘蛛的来访记录的,必须到主机后台查看。一般空间商都有控制面板供我们查看,如果你的网站最近访客多的话,这种访问记录是海量的,存成记事本都有好几兆大小,所以要善用Ctrl+F查找功能,比如说查找百度蜘蛛的访问记录,只需查找baidusp就行了,可以匹配到baiduspider的来访记录,访问了哪些页面,抓取了多少数据量,几分几秒来的。google的蜘蛛叫做googlebot,360的蜘蛛叫做360spider,通过搜索这些名字就可以定位到蜘蛛位置,可以看得一清二楚。

插了一段菜鸟教程再回到我们的讨论上来,为什么只要蜘蛛抓取了首页文章就能被它收录呢?这个秋叶也不知道,但是它确实可以抓取到。最近我是专门对蜘蛛来访记录进行了研究,如果你阅读了我前面写的文章《博客网站百度蜘蛛抓取频次多少为正常》,你就会知道秋叶网络博客的百度蜘蛛抓取频次是200多次/天,那么来说说秋叶在后台所看到的百度蜘蛛的来访记录吧,通过长期的观察,发现它对之前收录的文章feed页面抓取是最频繁的,其次就是首页,几乎每隔十几分钟就抓一次首页,其他的都是抓一些没用的东西,比如说小图标呀,css呀,js呀,带参数的动态链接啊,这些它都抓得乐此不彼,哎,没办法,robots已经完全阻止不了它,它爱干啥就干啥。庆幸的是它有抓首页,除了首页其他的都没什么价值,文章链接也没见过它抓过几篇,即使抓也是抓一些老旧老旧的文章链接,新文章根本就没看过。

但是从收录来看,一段时间后,之前写的文章就放出来了,而且显示的收录日期就是写文章的日期。但写文章那天蜘蛛是没有爬过文章页的,难道是我观察得漏了?这里我有三个猜想,第一就是漏看了,因为毕竟我不是一天24小时看着,但是从它爬取的整体趋势来看,几乎是不会爬的,所以漏看的可能性比较小。第二就是百度蜘蛛的隐形技术,即使它来爬过也不留任何踪迹,或者在抓取首页后通过其它特殊渠道获取首页内的链接文章。第三是它把首页抓取了,把所有链接都入库并把日期记录下来,改天它再获取这篇文章,但是时间是用入库时候的日期。这样文章的原始出处百度就可以通过日期对比而给出结论。

再回到标题上来,为了证实一下百度确实是在写文章当天就把文章收录了数据库,刚又去查了秋叶网络博客的收录,发现了半个月之前写的文章,记得那时写这些文章的时候,第二天我也在百度搜索了文章的网址,结果很显然是没有的,那时候就很纳闷为什么不收录,但是现在看来已经收录了,并放出来了,而且,日期就是写文章当天的日期!给个案例《Technetcal空间类型,价格和配置汇总》可以看看这篇文章的首次更新时间(收录时间)。所以说百度并不是不收录wordpress的文章,而是收录了但不让你察觉而已。对于版权的事大可放心,只要你的网站蜘蛛会正常抓取首页的话,基本上是定死了,你就是作者,其他人复制的都是抄袭。

那么百度为什么会要很迟放出来呢?为什么看有的网站的文章却是秒收呢,刚发布完就可以在百度搜索到呢?首当其冲的原因就是权重高!这种现象普遍存在于权重高的网站。因为权重高,所以放出快,如果你想要搜索引擎放出来快一点,那就努力把权重提高,再加上频繁的蜘蛛访问,无论什么文章,有没有价值的文章放出来都是很快的。还有一些网站没什么权重放出来也是很快的,这关键在于蜘蛛对网站的印象,一个不存在过度优化的网站放出来会快,相反地,过度优化的网站放出来会慢一些,印象不好。

目录: SEO优化 | 标签: , | 9550次阅读