在其实际的实时托管平台上构建实时站点的努力中,有没有办法告诉谷歌不要索引该网站?我发现了以下内容:
http://support.google.com/webmasters/bin/answer.py?hl=en&answer=93710
但这会告诉他们永远不要回来,还是他们只是看到 noindex 标记然后不列出结果,然后当它稍后再次爬网并且我的网站很好去时,我会删除 noindex 并且网站会然后开始被索引?
在其实际的实时托管平台上构建实时站点的努力中,有没有办法告诉谷歌不要索引该网站?我发现了以下内容:
http://support.google.com/webmasters/bin/answer.py?hl=en&answer=93710
但这会告诉他们永远不要回来,还是他们只是看到 noindex 标记然后不列出结果,然后当它稍后再次爬网并且我的网站很好去时,我会删除 noindex 并且网站会然后开始被索引?
听起来您想改用 robots.txt 文件:
http://support.google.com/webmasters/bin/answer.py?hl=en&answer=156449&topic=2370588&ctx=topic
当您希望您的内容被索引时,请更新您的 robots.txt 文件。
您可以使用该robot.txt
方法。
您可以指定可以爬取的子页面。谷歌回来,在索引之前检查文件。因此,您可以稍后删除该文件以获得完全索引。
你可以随时改变它。谷歌和其他机器人找到你的页面的方式是链接到另一个页面。只要它没有链接到另一个页面,它就不会被找到。此外,一旦您的网站启动,它很可能会远离网站列表。