关于搜索引擎，内容将从根目录中向下搜索。假如页面存储在第三级或更高等级的目录中，则搜索引擎将非常难以抓取，并且可能不包括许多内容。因而，建议将重要内容尽可能多地存储在根目录中。不要超越第三级目录。这样不只能够进步保藏的速度，并且能够进步排名。同时，在目录中设置关键词非常重要。当然，有时域名根目录不用只包括目录，也不用只有单个页面。这样的单个页面在搜索引擎中的权重必须高于目录中的单个页面。
当搜索引擎对目录进行爬网时，它将开端对特定页面进行爬网。页面上关键词的权重和密度以及页面上关键词链接的密度是搜索引擎参考中的重要因素。
简略来说，关键词的等级能够分为三个等级。加入关键词“完成蓟县网站开发及优化”作为核心关键词。这个词下有许多相关的扩展关键词，例如：全站仪优化计划，全站仪优化方法，全站仪推广策略以及许多其他二级扩展关键词。这样，在规划网站的结构时，有必要运用“站点优化”作为核心关键词，该关键词能够出现在域名中，而第二级扩展关键词能够显示为站点中的子列。目录称号。在第三级页面是要优化的三级关键词。例如，“完好站点优化解决计划”子列添加了一个类似于“完好站点优化计划下载”的页面。概括起来，有一句话是：网站页面结构中包括的关键词的重要性与要优化的关键词的重要性相匹配，重要的关键词应该放在重要的位置。
当然，内部进程比我上面说的要复杂得多，例如，提取有关网页的信息，指向网页本身的链接等。实际上，咱们并不难发现，实际上，搜索引擎在抓取内容时必须进行一些处理，以便更好地为查询服务提供服务。
