大家好,我想请教一个关于 python 爬虫的小问题^_^

[StackGao]

我想写个小爬虫,获取指定视频网站累计播放次数的

这是一个视频网页http://www.iqiyi.com/v_19rrh6k4pk.html

这是它播放量的html片段 <span id="widget-playcount" data-vi-elem="playCount">105万</span>



这是我的代码:

# encoding: utf-8
import urllib2,re


def getInfo(url,keyword):

print 'getting information from :'+ url +' ...'
myPage = urllib2.urlopen(url).read()
myItems = re.findall(r'<span\sid="widget-playcount"\sdata-vi-elem="playCount">.*?<\/span>',myPage,re.S)

for item in myItems:
print item

getInfo('http://www.iqiyi.com/v_19rrh6k4pk.html','')



为什么找不到呢?RE表达式有什么问题吗? 谢谢大家帮我看看...

[clino]

建议用kodos调试正则表达式

[glongzh]

估计数据是动态加载的吧

[yakczh]

from pyquery import PyQuery as pyq


url=r'http://www.iqiyi.com/v_19rrh6k4pk.html'

doc=pyq(url)

legend=doc("#widget-playcount")

print(legend.text())

[yangg]

viewsource 查看源代码为准，而不是从开发工具里看

[StackGao]

@yangg 还真是 查看源代码还真是没有播放量...为啥开发工具里不准呢... 这种情况怎么抓取特定的信息?

[AlloVince]

casperjs