昨天一个做推广朋友和平哥SEO优化交流了一个比较经典的问题,他说他的网站排名都掉了很长时间了,100%肯定是命中了惊雷算法(快排作弊,为什么这么肯定,因为他的网站是用过快排软件不到一周左右就出现排名直接下降),但是收录和抓取都很正常。最要命的是收录和索引反而比以前好了!
他有疑问,说网站降权的问题是不是解决了?
我问他排名和流量有回升吗?他的答案不出意料,排名和流量还是老样子,并没有任何的起色!所以他才感到疑问,为什么网站被降权了,收录、索引、抓取都是在增加的。
首先我们应该知道的,搜索引擎至少有三大系统来相互配合完成这一系列的工作。而这三大系统都是独立运作的,并不能说一个环节出了问题,三大系统都会随之出现问题。
系统之一:爬虫抓取系统
搜索引擎的爬虫系统主要是完成在互联网上抓取更多的网页回来,且这中间内置了一些算法,控制爬虫不要重复抓取、抓更重要的网页、抓最新的新闻资讯等。
而要想我们的网站在搜索引擎中有排名,有收录。这个爬虫抓取就是前提了。我相信很多人也知道,没抓取怎么可能有收录呢?如果你的网站被降权,但抓取还正常,甚至抓取量还有所增长不用质疑什么。试想一下,惩罚可能是阶段性的,而因为某个细节搜索引擎暂时性的惩罚你了,但你还是有可能产生优质内容的,搜索引擎爬虫怎么可能会放弃发现任何优质内容的可能性呢?
系统之二:索引系统
抓取之后的网页进入索引系统之后,索引系统的相关模块会对抓取到的网页信息进行一系列的抽样处理,像去重、分词、存储等。
在这个环节搜索引擎会将网页进行处理而把需要的信息按照一定的数据格式进行存储,并建立索引。
索引本身我们可以理解为是辅助检索系统更好的检索出相关信息的一套内容处理系统。
同样的,你网站降权,或者被具体的反作弊算法惩罚了。那索引系统就不将你的内容放入索引库了吗?那不一样,因为爬虫抓取过来的信息,在索引系统不同模块的处理环节中都有自己的判断标准。
不过平哥SEO优化猜测,仅仅是我个人猜测:进入索引系统后,会有一套反作弊的模块来索引库进行以域名或目录的方式进行检查,查到是你的站点内容被索引了,那么就给你这条索引的信息暂时标记为无效索引。等惩罚周期结束后,恢复正常的判断。
这层就也说明为什么你的内容既有收录,也有排名,但搜索关键词搜索不到,搜索全标题也搜索不到,但搜索网址或者site就出来了的原因(有时候site出来的概率也很低)。
系统之三:检索系统
检索系统,是从用户端发起的。也就是用户在输入某一个关键词后,点击搜索按钮。搜索引擎开启的一些查询工作。那查询的数据源就是我们的索引库。这个时候搜索引擎拿到的数据,是基本不可能拿到无效索引的数据,如果真有应该也是100名之外了。
但这中间影响排序的一套链接算法模块也会有所作为。有些链接算法是在线实时更新的,有一些算法是离线的(所谓离线就是不会实时更新,且本地计算,线上同步,如pagerank)。
假设你命中了某些链接算法,那么很有可能的结果是这样:你的网页被百度收录了,搜索全标题也能搜索到,但是搜索关键词就没有了。我们可以推理的分析就在搜索引擎从索引系统拿到信息后,又过了一遍有关于链接计算的反作弊算法。导致在这个环节你的网站内容被过滤掉了。然而没有参与排名。
如上通过介绍这三个系统,说明了网站被惩罚后,有抓取和收录,就是没排名和流量的原因。