Google算法就是谷歌搜索引擎用于处理搜索结果中网站排名的规则,此文将介绍历史上重要的Google算法更新以及SEO(搜索引擎优化)从无到有的过程。
提到SEO,肯定很多人认为先有了Google算法然后才有了SEO。而事实上,SEO出现的时间比谷歌成立的时间都要早。有些人说,1991年互联网第一个网站发布的时候,就有了搜索营销的概念,也有人说是在第一个搜索引擎出现的时候才有。而,真正意义上的SEO,出现的时间是在1997年左右。
在1997年,做搜索排名是个比较新潮的概念,搜索领域基本上是由网站目录占据的。这时候,由DMOZ推动的谷歌分类还没有出现。
LookSmart由Zeal提供支持,Go.com就是自己的网站目录,Yahoo搜索也是靠Yahoo目录提供支持。
如果你不熟悉DMOZ,只要知道它是一个网站黄页,而且是雅虎最初建立的基础就可以了解它在那个时期对于整个互联网的影响力了。这个网站的功能就是,通过人工提交审核,收集网络上最好的网站,并展示出来。能被这个网站收录,一度成为很多站长的期望。
在搜索引擎优化成为一个公认的名词之前,人们还使用着很多其他的称谓:
以上任何一种叫法,归根到底都是搜索引擎营销。于是,在2001年的时候,有个著名的业内人士,建议用搜索引擎营销替代搜索引擎优化这个词。但,没能成功。后面的时间里,仍然有很多人尝试重新定义SEO称谓,比如“Search Experience Optimization”(搜索体验优化)。
虽然搜索引擎优化这个术语并不十分准确,毕竟我们只是优化网站提示其在搜索引擎上的表现,而不是优化搜索引擎本身。但无论如何,搜索引擎优化(SEO)仍然成为了这个行业内接受度最高的名称。
搜索引擎改变了我们搜寻信息的方式,影响了我们生活的方方面面,比如购物,娱乐,等等。无论网站是何种类型,网店也好,博客也好,社交也好,最终都要通过搜索引擎这个桥梁接触到它的目标用户。如今这个情况是如何产生的呢?这就不得不先详细了解搜索引擎以及SEO的技术革新,让它们成为我们生活中重要的组成部分。
在上世纪90年代,搜索引擎领域内的竞争是非常激烈的,有人工操作的网站目录形式的搜索,也有自动抓取网站信息的列表。最开始的SEO,只有站内优化。
如果你想要在自己的领域内有个好排名,最重要的一点就是,你要在网站内容和标签中,重复足够多次的关键词。如果你的对手重复了100遍,那么你就重复200遍超过他!如今,这种做法,会在第一时间被判定成过度优化,遭到搜索引擎处罚。
1994年:斯坦福大学的学生杰里·王和大卫·菲罗在校园活动中创建了Yahoo。雅虎最开始只是一个书签列表,收录有趣的网站。网站管理者需要提交站点到Yahoo目录里,Yahoo收录了这些网站后,用户可以通过Yahoo的站内搜索发现这些网站。
1996年:佩奇和布林,两个斯坦福大学的学生,建立并测试了Backrub,一个新的搜索引擎,根据网站链接的相关性和流行度对站点进行排名。Backrub最终成为了Google。
1997年:继《网站管理员搜索引擎指南》获得成功后,丹尼·沙利文推出了“Search Engine Watch”,一个专门提供搜索行业新闻、搜索网站技巧以及如何对网站进行更好排名的信息的网站。Google.com也在这年注册了。
1998:Goto.com发起了赞助链接和付费搜索。广告商在Goto.com上竞标排名会高于Inktomi提供的自然搜索结果。Goto.com最终是由雅虎收购了。DMOZ(开放目录)成为搜索引擎优化从业者最抢手的地方,可以让他们的网站得到排名。MSN进入搜索行业,提供MSN搜索,最初也是由Inktomi提供支持。
1999年:有史以来第一次搜索营销会议,搜索引擎战略(SES)举行。
在2000年的时候,Yahoo做出了搜索史上最糟糕的战略举措,与Google结成伙伴关系,让谷歌取代Inktomi,为他们提供搜索结果。
此前谷歌是一个鲜为人知的搜索引擎。鲜为人知!最终结果是:雅虎的每个搜索结果都显示“由Google提供支持”,雅虎最终将他们最大的竞争对手介绍给了世界,让Google成了家喻户晓的名字。
在此之前,搜索引擎主要根据页面内容、域名、网站目录收录情况以及网站结构对站点进行排名。但是,Google的网络爬虫和PageRank算法带来了信息检索的革命性改变。Google对于站内外因素会进行综合判定,包括网站外链的数量和质量(以及使用的锚文本)。
Google算法本质上就是“如果有很多人在谈论你,你一定很重要。”
虽然外链只是谷歌排名算法中的一个组成部分,但是很多Google SEO从业者认为外链是最重要的排名因素,并且提供专门创建外链的服务。
在最初的十几年里,为了获得更高的Google排名,外链被严重滥用,导致Google后期大大降低了外链因素的影响力。所以,如果现在还想着单纯靠刷外链取得排名,是毫无前途的。
在2000年的时候,Google工具栏的出现,允许SEO从业者查看网站的PageRank评分(介于0-10之间)。很多人为了提高网站排名,寻找高PR网站,希望互相交换友链。因此,对于PageRank,Google本质上引入了一种货币度量,让很多人偏离了创作高质量网站的正途。
后来,PageRank也被Google取消了,网站在谷歌的权重不在可见。从这年开始,Google通过AdWords付费广告形式,给一些网站提供排名,这些付费广告开始出现在谷歌自然搜索结果的右侧。与此同时,一群网站管理员非正式地聚集在伦敦一个俱乐部,分享关于搜索引擎优化的信息。这次非正式的聚会最终变成了Pubcon,一个大型搜索行业会议,至今仍在运行。
2003年,在收购Blogger.com之后,Google推出了AdSense,它会根据所在网页内容,提供相关的Adwords广告。AdSense和Blogger.com的结合,带来了博客的风潮,通过博客赚取广告费。Google当时可能没有意识到他们正在制造问题,AdSense导致了大量的垃圾网站出现,这些网站充斥着毫无价值的复制内容,只是为了获得广告费而存在的。
大约在2004年,Google和其他顶级搜索引擎开始改善带有地理信息的查询结果(例如,餐馆、管道工或您所在城市或城镇中的其他类型的商业或服务提供商)。到2006年,Google推出了一个地理位置框显示在搜索结果中。也是在2004年左右,Google开始更多地利用用户数据,如搜索历史和兴趣,来个性化搜索结果。这意味着,当搜索相同的查询时,您看到的结果可能与咖啡店中坐在您旁边的其他人看到的结果不同。
在2005年,NoFollow标签被创建出,作为一种打击垃圾内容的手段。
Jagger更新:减少不请自来的交换链接要求,降低了锚文本外链的作用。
Big Daddy更新:提升了谷歌算法对于网站之间链接价值的判断能力。
2006年10月,Google以16.5亿美元收购了视频分享平台YouTube。如今,YouTube拥有超过十亿用户,成为了世界上使用量第二大的搜索网站,让视频搜索优化日益流行。
谷歌分析,这个免费的,由于发布时,用户过多,导致该服务一度停机维护。
谷歌站长工具,现在称为搜索控制台,网站管理员可以通过它查看网站搜索排名和抓取情况。
此外,在2006年,XML站点地图获得了来自搜索引擎的普遍支持。XML站点地图允许网站管理员向搜索引擎提交其网站上可供抓取的全部URL。XML站点地图不仅包含URL列表,还包含一系列进一步的信息,如更新时间,有助于搜索引擎更高效地抓取。
从2007年开始,Google的搜索结果发生了比较明显的改变,这些转变的目的都是为了提升用户的体验。谷歌的自然搜索结果里,增添了垂直搜索结果,包括新闻,视频和图片。这次大的转变是从Florida更新开始的。
2008年,当时的谷歌CEO发表言论,说互联网正在变成一个垃圾场,品牌化是解决问题的方法。品牌化能够清除这些垃圾。自从他说过这段话,还没到6个月,Google发布了Vince算法更新,很多品牌网站获得了大量的排名递进。
这个更新,并不是就是为了让这些大品牌的网站获得好的排名,根据谷歌的意思,Google旨在帮助受人信任的网站获得好的排名,大品牌的网站一般来说都是比小的品牌或者创建时间还短的品牌更加受人信任。
这次更新不久后,谷歌又发布了一次Caffeine算法更新,用以提高自身的收录网站速度,通过收录更多的信息,提供更加快速、准确的搜索结果。
提到速度一词,Google在2010年,明确表示网站的加载速度是排名因素之一。
2009年,微软搜索改名Bing搜索,为了挑战Google在美国接近百分之70搜索份额的地位,雅虎和微软签订了10年的搜索领域合作,事实上这次合作只坚持了5年。这次合作,成功地让Bing成为了美国第二大搜索引擎,但是无论在美国市场还是全球市场,Bing仍然无法撼动Google的绝对领导地位。
在20世纪晚期,社交网络开始流行。Google在YouTube上下了重注,同时开发了Google+平台。但其他的社交平台也争相出现,其中Facebook,Twitter和LinkedIn成为主流。伴随着社交平台的兴起,社交信号开始影响搜索排名。因为通过社交平台能够吸引流量来到网站中,而且社交信号能够增加网站的相关度和辨识度。
2011年和2012年,Google发布了两次重大的算法更新:Panda和Penguin。这两次更新对于SEO界产生了比较深远的影响,帮助谷歌进一步提供高质量的搜索结果,以及净化网络环境。
在2011年,Google发现了它正在面临一个严重的问题,很多所谓的“内容农场”(生产大量低质量内容)主导着搜索结果。很多靠抄袭内容的网站比该内容首发的网站排名还要高。而,这些靠抄袭的网站还获得了大量的广告收入(上面内容提到的AdSense问题)。
于是Google发布了Panda更新,很多上述网站在一夜之间失去了大部分流量,谷歌大大提高了对于质量的分辨能力。为了消除低质量内容,Panda算法在接下来的几年内不断升级,并最终整合到了谷歌的核心算法中。
很多人还在体会Panda更新带来的改变时,谷歌算法再次进行了一次重大更新,引入了过度优化概念,主要针对通过刷外链操纵排名的行为,这次更新就是Penguin算法。
Google会检测网站外链的整体情况是否自然,是否在刻意的影响关键词排名,比如大量精准的锚文本链接。Penguin算法的升级次数没有Panda频繁,有时隔了一年多才升级一次。和Panda算法一样,Penguin算法在2016年被整合到谷歌的核心算法中。
2012年5月份,Google推出了“知识图谱”,这是一次从关键词搜索到语义式搜索的重大转变,搜索不再完全是机械的,它会结合人们的搜索意图给出结果。
Google的核心工程师是这么描述它的:
“知识图谱使你能够搜索Google知道的事物、人或地方,比如地标、名人、城市、运动队、建筑物、地理特征、电影、天体、艺术品等等,并立即获得与查询相关的信息。这是构建下一代搜索的关键一步,结合网络数据,更加像人一样地理解世界。“
Google的下一代搜索算法是在2013年9月以蜂鸟(Hummingbird)的形式出现的,这是一种新算法,用于更好地处理自然语言查询和语义搜索。随着移动搜索和语音搜索的兴起,谷歌需要重新考虑如何改进算法,以满足如今搜索用户的需求。
Hummingbird被认为是自2001年以来Google核心算法的最大变化。显然,Google希望提供更快和更相关的结果,尤其是向移动用户。
随着手机的普及,越来越多的用户使用智能手机上网,并搜索需要的信息。在2015年,Google的移动端搜索量首次超过桌面搜索。也是在2015年,Google推出了一个备受期待的移动友好算法更新,旨在给用户“最相关和最及时的结果,无论是在移动友好网页还是在移动应用程序。”
为了加快网页速度,Google还在2016年推出了加速移动网页(AMP)。AMP被设计为即时加载内容,并且大部分已经被新闻媒体和出版商采用。谷歌对于移动端的重视并未结束,2018年,Google发布了Mobile-first Index。
2017年,谷歌CEO:Sundar Pichai宣布Google将以人工智能为主导方向。在搜索方面,我们已经开始看到人工智能对Google RankBrain的影响。RankBrain发布于2015年10月,最初是用于根据用户输入的单词或短语,理解15%以前从未有过的搜索。后来,Google扩大了RankBrain的应用范围,让它参与到每次搜索中。虽然RankBrain影响排名,但是它不是传统意义上的排名因素。
在智能搜索的世界里还有很多即将到来的事情。语音搜索正在增加,越来越多的人开始使用聊天机器人和个人助理(例如,苹果的Siri、亚马逊的Alexa和微软的Cortana)。
2018年8月1日,Google又推出了一次重大更新。这次更新主要影响到健康和医疗类网站的搜索排名。因此,被称为“Google Medic Update”,也就是医疗更新的意思。
这次更新的影响范围很大,有些Google SEO专家甚至称之为:继2012年企鹅算法更新后对搜索排名影响最大的算法。
很多网站受到了波及,导致流量暴跌。
据统计,健康、医疗类的网站受到的影响最大,占所有受影响网站的42%~50%,其余受影响的网站来自各个行业,包括电子商务、旅游和娱乐业。谷歌自己也否认了此次更新是专门针对健康医疗行业。
不少人在Twitter上询问Google官方如何恢复受波及网站以及应该遵守哪些具体规范,对此谷歌并没有太过明确的解答,只说了此次更新表现不佳的页面不一定具有多大的问题,只是他们旨在发现以前可能忽略的高质量页面,并给予更好的安排。这类页面的排名上升了,必然会导致有些页面的排名被挤下去。另外,继续强调了高质量内容的重要性。
虽然,谷歌没有给出此次更新太多具体的解答。但,有心人发现,Google的质量评分指南在此次更新发布的前一周进行了更新,其中多出了强调E-A-T和搜索意图的内容。
什么是E-A-T?这三个字母代表网站的三个方面:专业度、权威度、可信度。网站在这三个方面表现得越好,就越容易受到Google的青睐。如何提升这几个方面?可以参考:
用户的每一次搜索都是有具体想要获得的信息的。但,搜索同一个词的用户,不一定目的是相同的。比如,搜索一个机器,有的人是想买,有的人是想了解工作原理,这就是用户具体的搜索意图。同等条件下,满足用户搜索意图的页面,肯定会获得更高的排名。更加智能地分析用户搜索意图,也是谷歌一直在做的事情,搜索结果中显示的问题框就是为了更好地满足用户的搜索意图。
Google通过分析用户访问行为,判断一个网站是否能够满足用户搜索意图。比如,用户的点击率、停留时间、浏览深度、跳出率等情况。打个比方:两个网站开始分别排在第五名和第六名,结果大多数用户都点击第六名那个网站进去看。这就说明,第六名那个网站更能满足用户的搜索意图。长期以往,第六名那个网站可能就会排到第五名那个网站前面去。
谷歌此次的Medic算法更新,更多的注意力是放在网站内容质量方面。但,外链方面也不是毫无影响,也有不少网站因为垃圾外链在此次更新中遭到清算、被严重处罚。所以,想要长久经营好网站,站内、外的质量都是始终不容忽视的。
在2020年的10月份,Google宣布:他们应用了一个叫做“Passages”的新的搜索技术。这项技术会让Google搜索引擎,可以把一个页面里的某个段落信息,单独提取出来排名。
这个听起来就像是上文中我们说过的“Featured Snippets”的增强版本,我们来看一下谷歌自己给出的前后对比图:
以前的Google只会判断整个页面和关键词的相关度,从此以后,它也会去衡量页面中某个段落与搜索词的相关性了。
这里我们要理解清楚,页面的整体相关度仍然是非常重要的,包括以前的其他排名因素也还是会继续发挥作用。唯一的区别就是说:一个合理划分好内容段落的页面,其排名机会将会更多。
搜索引擎和搜索引擎优化自上世纪90年代以来已经走过了漫长的道路。这篇文章中只触及到了其中的一些方法。
SEO的历史充满了激动人心的转折:新搜索引擎的诞生、旧搜索引擎的死亡、新的SERP特性、新算法和不断更新,以及伟大的SEO出版物、会议、工具和专家的出现。
虽然搜索引擎和搜索引擎优化已经发展了很多年,但有一件事仍然是正确的:只要有搜索引擎,搜索引擎优化仍将是至关重要的。
SEO将继续前行,并且越来越精彩!