爬天气数据，解析网页的时候有个元素不知道怎么取

[LeIYc]

<div class="minMax">
<div id="maxTempDiv" style="float: left;"><img src="http://i.tq121.com.cn/i/weather2017/max.png"><span id="maxTemp">26℃</span></div>
<div id="minTempDiv" style="float: left;"><img src="http://i.tq121.com.cn/i/weather2017/min.png"><span id="minTemp">19℃</span></div>
</div>


怎么才能把温度信息 取出来。
temp_list = soup.find_all('span',id='maxTemp')
temp_list = soup.find_all('span',class_='minMax')
最后结果都是没有温度信息，打印出来这个：
[<div class="minMax">
<div id="maxTempDiv"><img src="http://i.tq121.com.cn/i/weather2017/max.png"/><span id="maxTemp"></span></div>
<div id="minTempDiv"><img src="http://i.tq121.com.cn/i/weather2017/min.png"/><span id="minTemp"></span></div>
</div>]
这种元素提取有没有什么好一点的教程啊？求助！！！！！

[yu099]

@LeIYc 打个断点，看哪个 js 加载的啊

[yu099]

或者直接 selenium，
@LeIYc 直接访问的话，你得看一下还带上什么信息的

[woscaizi]

直接带上 cookie 请求接口就 ok 了。
url： http://d1.weather.com.cn/sk_2d/101280601.html?_=1523255737236
cookie 类似这样：f_city=%E6%B3%B0%E5%AE%89%7C101120801%7C; Hm_lvt_080dabacb001ad3dc8b9b9049b36d43b=1523255730; Hm_lpvt_080dabacb001ad3dc8b9b9049b36d43b=1523255730; vjuids=2a011e2fb.162a91de08f.0.258106460fa03; vjlast=1523255730.1523255730.30; Wa_lvt_1=1523255731; Wa_lpvt_1=1523255731
还有就是一些基本的模仿浏览器的配置。

[yuanfnadi]

如果只是为了天气数据。可以看一下彩云天气的 api。免费的。

[LeIYc]

非常感谢大家，发现还是得仔细看一遍书啊。
《 Python 网络数据采集》这本怎么样，刚下载下来。准备好好看看。

[F0nebula]

@LeIYc #20
Referer: http://www.weather.com.cn/

[jimmyczm]

直接用 selenium 加载再查找好一点
from selenium import webdriver

browser = webdriver.Chrome()
browser.get('http://www.weather.com.cn/weather1dn/101280601.shtml')
min = browser.find_element_by_id('maxTempDiv')
max = browser.find_element_by_id('minTempDiv')
print(min.text, max.text)

[baday]

看对接口的请求记录，如果直接请求接口能够获取就不用模拟 js 了