话说你们有注意过 youtube 的 robots.txt 吗?

2016-05-24 14:06:31 +08:00
 xzpjerry731

开头那几个是什么梗。。 get 不到:

/# robots.txt file for YouTube

/# Created in the distant future (the year 2000) after

/# the robotic uprising of the mid 90's which wiped out all humans.

User-agent: Mediapartners-Google* Disallow:

User-agent: * Disallow: /comment Disallow: /get_video Disallow: /get_video_info Disallow: /login Disallow: /results Disallow: /signup Disallow: /t/terms Disallow: /verify_age Disallow: /watch_ajax Disallow: /watch_popup Disallow: /watch_queue_ajax

2131 次点击
所在节点    问与答
2 条回复
DT27
2016-05-24 14:34:15 +08:00
<amp-youtube data-videoid="mvrva8NoMLM" layout="responsive" width="480" height="270"></amp-youtube>http://www.metrolyrics.com/robots-lyrics-flight-of-the-conchords.html
http://www.google.com/humans.txt
xzpjerry731
2016-05-24 14:51:55 +08:00
@DT27 !!英却斯汀!!

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/280893

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX