搜索引擎通过三个主要功能工作：
- 爬行：在 Internet 上搜索内容，查看他们找到的每个 URL 的代码/内容。
- 索引：存储和组织在爬取过程中发现的内容。一旦页面在索引中，它就会在运行中显示为相关查询的结果。
- 排名：提供最能回答搜索者查询的内容，这意味着结果按最相关到最不相关排序。
什么是搜索引擎抓取？
爬行是搜索引擎派出一组机器人（称为爬虫或蜘蛛）来寻找新的和更新的内容的发现过程。内容可能会有所不同——它可以是网页、图像、视频、PDF 等——但无论格式如何，内容都是通过链接发现的。
Googlebot 从获取几个网页开始，然后按照这些网页上的链接查找新的 URL。通过沿着这个链接路径跳跃，爬虫能够找到新内容并将其添加到名为Caffeine的索引中——一个包含已发现 URL 的庞大数据库——稍后当搜索者正在寻找该 URL 上的内容是很适合。
什么是搜索引擎索引？
搜索引擎处理和存储他们在索引中找到的信息，这是一个包含他们发现的所有内容的巨大数据库，并且认为足以为搜索者提供服务。
搜索引擎排名
当有人执行搜索时，搜索引擎会在他们的索引中搜索高度相关的内容，然后对这些内容进行排序，以期解决搜索者的查询。这种按相关性对搜索结果进行排序称为排名。一般来说，您可以假设网站排名越高，搜索引擎认为该网站与查询越相关。
可以阻止搜索引擎爬虫访问您网站的部分或全部内容，或者指示搜索引擎避免将某些页面存储在其索引中。虽然这样做可能是有原因的，但如果您希望搜索者找到您的内容，您必须首先确保爬虫可以访问它并且可以索引。否则，它就像隐形一样好。
在 SEO 中，并非所有搜索引擎都是平等的
许多初学者想知道特定搜索引擎的相对重要性。大多数人都知道 Google 拥有最大的市场份额，但针对 Bing、Yahoo 等进行优化有多重要？事实是，尽管存在 <a href=”https://en.wikipedia.org/wiki/Web_search_engine”>30 多个主要网络搜索引擎</a>，但 SEO 社区确实只关注 Google。<strong>为什么？</strong>简而言之，Google 是绝大多数人搜索网络的地方。如果我们将 Google 图片、Google 地图和 YouTube（Google 财产）包括在内，<a href=”/blog/state-of-searcher-behavior-revealed”>超过 90%</a> 的网络搜索发生在 Google ——这几乎是必应和雅虎加起来的 20 倍。
文章为作者独立观点，不代表站长派立场，本文链接：https://zhanzhangpai.com/?p=995
免责声明：本站部分内容来源互联网整理，如有侵权请联系站长删除。站长邮箱：1245911050@qq.com
