搜索引擎的存在是为了发现、理解和组织互联网的内容,以便为搜索者提出的问题提供最相关的结果。为了显示在搜索结果中,您的内容必须首先对搜索引擎可见。可以说,这是SEO难题中最重要的部分:如果找不到您的网站,那么您将永远不会出现在SERP(搜索引擎结果页)中。
搜索引擎的工作原理,主要分为三个部分:
爬行与抓取:在Internet上搜索内容,查看他们找到的每个URL的代码/内容。
索引:存储和组织在爬网过程中找到的内容。一旦页面进入索引,它就有机会显示在查询结果中。
排名:提供最能回答搜索者查询的内容,这意味着搜索结果的排序方式从最相关到最不相关。
什么是搜索引擎爬行与抓取?
爬行是一种发现过程,搜索引擎蜘蛛寻找新的和更新的内容。内容可能有所不同-可能是网页、图像、视频、PDF等,但无论格式如何,内容都是通过链接发现的。
搜索引擎机器人(也称为蜘蛛)会逐页爬行以查找新内容和更新内容。
Googlebot首先获取一些网页,然后按照这些网页上的链接查找新的URL。通过沿着链接找到新内容并将其添加到索引中(索引库一个庞大的已发现URL的数据库)。
什么是搜索引擎索引?
搜索引擎处理和存储他们在索引中找到的信息,索引是他们发现并认为足以为搜索者服务的所有内容的庞大数据库。
什么是搜索引擎排名?
当有人执行搜索时,搜索引擎会在索引中搜索高度相关的内容,然后对这些内容进行排序,以期解决搜索者的查询。搜索结果的相关性排序称为排名。通常,您可以假设网站的排名越高,搜索引擎认为该网站与查询的相关性就越高。
谷歌说:有可能阻止您的部分或全部网站访问搜索引擎爬行程序,或者指示搜索引擎避免将某些页面存储在其索引中。尽管这样做可能有一定的原因,但是如果您希望搜索者找到您的内容,则必须首先确保其对爬网程序是可访问的并且可索引。否则,它就像隐形一样好。