如何禁止搜索引擎取快照

新网站还没有内容
搜索引擎爬取抓快照怎么办
我想等有一定资源在把网站放出来啊
 
已邀请:

daibu

赞同来自:

在禁止抓取域名的网站根目录新建一个robots.txt文件
通过写禁止搜索引擎抓取的robots.txt文件来禁止引擎的抓取!
代码内容:

  1.  User-agent: *
  2. Disallow: / 


这个禁止抓取非常适合新站建立初期,内容不多或架构不健全,引擎快照更新慢的情况尤其适合!

[已注销]

赞同来自:

asfdsb

[已注销]

赞同来自:

sdgdfn

要回复问题请先登录注册