Google管理员给站长的建议(三)

秀文采   2015-06-07 21:47   181   0  
抓取是 Googlebot 发现要添加到 Google 索引中的新页面和更新后的页面的过程。我们的抓取过程是根据网页网址的列表进行的,该列表是在之前进行的抓取过程中生成的,且用网站管理员提供的站点地图数据进行扩充。在Googlebot 访问每个网站时,它会检测每个网页上的链接,并将这些链接添加到它要抓取的网页列表中。新建立的网站、对现有网站所进行的更改以及无效链接都会被记录下来,并用于更新 Google 索引。
检查抓取错误。
网站管理员工具中的抓取错误页提供了有关我们在您的网站上尝试抓取却无法访问的网址的详细信息。请查看这些错误,并尽您所能修复所有错误。Googlebot 会在下一次抓取您的网站时注意到这些更改,并使用这些更改更新 Google 索引。
查看您的 robots.txt 文件。
通过测试 robots.txt 工具,您可以分析您的 robots.txt 文件,看看您有没有阻止Googlebot 访问自己网站上的任何网址或目录。
确保网址未被元标记拦截。
查看您的网站结构并确保其易于访问。
大多数搜索引擎是基于文本的。如果您使用 JavaScript、DHTML、图片或 Rich Media(例如 Silverlight)来创建导航和链接,那么,Googlebot 和其他信息采集软件在抓取您的网站时可能会遇到问题。
如果您最近调整了您的网站结构,或将网站移到了新的域中
如果您最近调整了您的网站结构,或将网站移到了新的域中,以前排名较高的网页现在可能会排名不佳。为避免出现这种情况,请在您的 .htaccess 文件中使用 301 重定向("永久重定向")来灵活地重定向用户、Googlebot 和其他信息采集软件。(在 Apache 中,您可在 .htaccess 文件中进行以上操作;而在 IIS中,您可通过管理控制台来进行以上操作。)点击此处查看301 HTTP 重定向的详细信息
考虑创建并提交站点地图。
即便您的网站已经编入索引,站点地图仍是向 Google 提供有关您的网站和您认为最重要网址的信息的一种方法。在以下情况中,站点地图特别有帮助:您的网站具有动态内容或Googlebot 不易发现的其他内容;您的网站刚刚建立,或指向它的链接并不多。