这样的，。我们客户的一个网站，所有的产品详情页有部分页面，大概有十几个左右，google 回应说是页面禁止被他们抓取，让我们检查页面，于是有了以下做法：
页面不允许搜索引擎抓取我了解到有两种情况: 1：网站根目录设置了 robots.txt 2：具体页面里有<meta name="googlebot" content="noarchive">这个 meta 信息。 但是我刚刚看了一下你发给我的页面，代码里并没有第二中情况，也就是没有 meta 信息出现，我想是不是第一种情况
刚刚 seo 回应我 robots.txt 并没有禁止这个产品页，那么我想问下还有其他的什么办法可以检测是什么原因导致的吗？
这是一个专为移动设备优化的页面（即为了让你能够在 Google 搜索结果里秒开这个页面），如果你希望参与 V2EX 社区的讨论，你可以继续到 V2EX 上打开本讨论主题的完整版本。
V2EX 是创意工作者们的社区，是一个分享自己正在做的有趣事物、交流想法，可以遇见新朋友甚至新机会的地方。
V2EX is a community of developers, designers and creative people.