爬天气数据，解析网页的时候有个元素不知道怎么取

[LeIYc]

<div class="minMax">
<div id="maxTempDiv" style="float: left;"><img src="http://i.tq121.com.cn/i/weather2017/max.png"><span id="maxTemp">26℃</span></div>
<div id="minTempDiv" style="float: left;"><img src="http://i.tq121.com.cn/i/weather2017/min.png"><span id="minTemp">19℃</span></div>
</div>


怎么才能把温度信息 取出来。
temp_list = soup.find_all('span',id='maxTemp')
temp_list = soup.find_all('span',class_='minMax')
最后结果都是没有温度信息，打印出来这个：
[<div class="minMax">
<div id="maxTempDiv"><img src="http://i.tq121.com.cn/i/weather2017/max.png"/><span id="maxTemp"></span></div>
<div id="minTempDiv"><img src="http://i.tq121.com.cn/i/weather2017/min.png"/><span id="minTemp"></span></div>
</div>]
这种元素提取有没有什么好一点的教程啊？求助！！！！！

[windfarer]

xpath 了解一下

[0vels]

soup.find('span',id='maxTemp').string 这样应该可以

[F1024]

xpath

[zbl430]

pyquery 也可以看下

[imnpc]

他这个元素大概是网页加载完成以后 js 操作 dom 写过去的...

[LeIYc]

@windfarer OK 上网搜到了。

[LeIYc]

@0vels 为什么。是说除了温度数据以外其他都是标签吗？这什么原理。不是直接写在网页上的吗？是从别的地方取到的？

[LeIYc]

@0vels 还是不对。打印出了 None。

[shower]

用 request-html，执行 JS 之后再取数据

[LeIYc]

@shower 额。。。具体怎么写？查下好像说数据是 js 生成的。直接取的话取不到？

[johnj]

看一下页面有没有发 ajax 请求，说不定有

[Vhc001]

@LeIYc 把页面 url 贴出来

[LeIYc]

http://www.weather.com.cn/weather1dn/101280601.shtml

[mskip]

@LeIYc
from requests_html import HTMLSession


session = HTMLSession()
response = session.get('http://www.weather.com.cn/weather1dn/101280601.shtml')
response.html.render()
print(response.html.find('#maxTemp')[0].text)

[rabbbit]

后加载的

[alen]

F12 看 Network

[silencefent]

//span[@id='maxtemp']
//span[@id='mintemp']

[em70]

准备两个函数
1. 提取两个字符串之间的内容
2. 提取一个文档内所有这两个字符串之间的内容

无论什么语言,有这两个函数,可以分析任意文本

[imn1]

特意加两个 id 标签，后加载可能性极高

而且天气数据基本按小时为单位更新，多数是 json 更新

[LeIYc]

谢谢 @rabbbit
找到了这样的信息：
var dataSK =
{"nameen":"shenzhen","cityname":"深圳","city":"101280601","temp":"26","tempf":"78","WD":"西南风","wde":"SW","WS":"2 级","wse":"&lt;12km/h","SD":"54%","time":"13:50","weather":"多云","weathere":"Cloudy","weathercode":"d01","qy":"1009","njd":"30.94km","sd":"54%","rain":"0.0","rain24h":"0","aqi":"71","limitnumber":"","aqi_pm25":"71","date":"04 月 09 日(星期一)"}
这个应该是正确的。但是怎么才能获取这个信息呢？ 直接访问是不行的