SEO技术教程-搜索引擎索引指南

搜索索引是什么？



针对搜素引擎索引可以这样理解：我们在百度查询到的搜索结果，都是百度在他们的索引库里面进行一系列的筛选比较而来的（只是简单的说明，实际情况会更复杂）。这些索引，是搜索引擎通过机器人（有时称为“抓取工具”或“蜘蛛”）来我们网站持续抓取网站内容，并根据一定规则来决定该页面是否进入索引库。



如何加快搜索引擎对我们页面的抓取和索引呢？下面讲到的知识就需要技术人员的支持。



简单来说，想索引，就必须先让搜索引擎发现页面（要有抓取入口），搜索索引有三种主要方法：



被动性质。第一种方法是最简单的，就是第一次提交域名后，就不用再管，搜索引擎是会自己继续来抓取页面内容。因为搜索引擎希望保持被抓取的页面持续更新，所以它会努力自己完全抓取网站。在被动的方法中，您只需等待搜索引擎为您的网站建立索引，并在规范化您的网址结构时相信它的最佳判断。对于这种方法，你不必做任何事情。除了丧失某种程度的控制权之外，这里唯一的潜在缺点是搜索引擎有时需要更长的时间来更新其索引。



引导性质。 引导性的方法允许我们使用站内地图更新站点上的URL结构和层次结构。被称为HTML网站地图，这很容易创建。创建一个名为“站点地图”的页面，列出您希望搜索引擎索引的页面，并根据需要分为不同类别和子类别，以提供搜索蜘蛛爬取。您还应该包含说明以确定每个链接的用途，这并不能保证索引，但可以帮助澄清混乱，加快索引过程。这里的主要缺点是每次你改变你的网站时都需要调整它，除非该网站地图是让技术进行自动获取相关信息内容，当我们更新相关内容时，该页面内容也随着更新。



主动性质。就是我们主动把页面URL提交给搜索引擎，以百度为例，就有三种方式：主动推送、自动推送、xml形式的sitemap。在这三种方式中，以主动推送为最佳，因为它是实时的把URL推送给百度（需要技术按照百度的开发文档进行开发）；其次，是自动推送，它是一段JS，放在页面底部（跟安装百度统计一样），当有用户访问该页面时，就会触发，该JS会自动的把该页面的URL提交给百度（安装简单便捷，不需要任何技术，只需要把该代码安装在页面底部即可）；最后，sitemap地图，里面可以包含网站所有URL，百度也会定期来抓取该网站地图中的URL（这个周期与前两种比较，就比较长）。个人建议：三种方式全部都做，它们之间并不相互冲突。



在让搜索引擎发现我们网站页面前，其实我们还需要考虑为网站创建一个robots.txt文件，这本质上是一个说明手册，告诉百度机器人在您的网站上什么文件可以抓取，什么文件不能抓取。