爬取优酷上的数据，在网页源码中没有，有办法爬取到吗？

[JhOOOn]

这个是需要抓取的内容

这个是在网页源码中看到的内容，但是没有数据

但是通过浏览器的审查元素功能能看到数据。

请问通过什么方法可以获得数据？
这个是网页的链接： http://v.youku.com/v_show/id_XMTI1ODc5MjU2NA==.html?from=s1.8-1-1.1#comment
谢谢

[cyberdak]

js 加载出来的数据
只能找 js 的加载数据了

[Tink]

优酷不是有 api 吗？？

[Tink]

http://open.youku.com/docs?id=46

这个接口可以拿到啊
https://openapi.youku.com/v2/videos/show.json

[JhOOOn]

@cyberdak 请问如何找 js 加载的数据？

[JhOOOn]

@Tink 谢谢，想试着爬虫抓取，有没有好方法。

[gongpeione]

看看 PhantomJS

[JhOOOn]

@gongpeione 谢谢，对 js 不是很懂，有思路就好办了。

[jadecoder]

最简单的办法是找到那个 ajax 请求，可以抓 http 包。例如播放数应该是这个

http://v.youku.com/QVideo/~ajax/getVideoPlayInfo?__rt=1&__ro=&id=314698141&sid=299011&type=vv&catid=97

但是量大了之后会触发反爬虫机制，那就是另外一个课题了

[gamexg]

F12 网络， F5 刷新，里面总有一个有数据。

[lxy]

在审查元素的 Network 标签下开启 Filter ，查看 XHR 下的 Preview 或 Response 内容，一般有对应数据的就是了。

[LINAICAI]

优酷开放平台有啊。

[em70]

嗅探接口去，看接口规则，用页面里的数据去向接口请求

[JhOOOn]

@jadecoder 谢谢，找到了另外一个播放量， http://comments.youku.com/comments/~ajax/getStatus.html?__ap=%7B%22videoid%22%3A%22333767889%22%2C%22userid%22%3A%22790802556%22%2C%22oldSid%22%3A-1%2C%22showid%22%3A%22277930%22%2C%22episode%22%3A%221%22%7D&__ai=&__callback=commentInfoCallback

PhantomJS 是个好办法。

[jadecoder]

@JhOOOn PhantomJS 的性能问题极其严重