网站的检索
搜索引擎“爬行”的网站,从一页到另一页很难置信地快。他们把你的页面复制成一个叫做“索引”的页面,就像一本庞大的互联网书。当有人搜索时,搜索引擎翻遍了这本大书,找到了所有有关的页面,然后挑选出它觉得比较适合展示的页面。要找到,你需要在书中。在书中,你需要被爬行。
大部分站点通常没爬行问题,但有的事情或许会致使问题。比如,Javascript或Flash可能隐藏链接,使那些链接致使搜索引擎隐藏。两者都可能致使页面上的实质单词被隐藏。
每一个站点都有一个爬行预算,依据搜索引擎的相对信赖和权威,搜索引擎天天会爬行大约一段时间或页面。较大的站点或许会寻求提升抓取效率,以确保更频繁地抓取“正确”页面。robots的用法,内链的结构尤其是告诉搜索引擎不要抓取某些URL参数页面都可以提升抓取效率。然而,对于大部分人来讲,爬行问题是比较容易防止的。
除此之外,用网站地图是一个非常不错的实践,通常使用HTML和XML二种格式,为了便于搜索引擎抓取你的网站。你可以找到更多关于网站地图和处置潜在的问题,在搜索引擎爬行类以下的内容网站构造在优化中要紧吗网站构造在优化中要紧吗?本文链接: