我需要隐藏我所有的网站页面，所有的蜘蛛机器人，除了主页（www.site.com）应该由机器人进行解析。
没有人知道我该怎么办呢？
Answer 1:
添加到您不想索引标记所有页面<meta name="robots" content="noindex" />
或者你可以创建robots.txt你的文档根，并把有喜欢的东西：
User-agent: *
Allow: /$
Disallow: /*
文章来源: Hide web pages to the search engines robots
