继续请教 scrapy 问题 为什么蜘蛛会得到 404 状态而浏览器打开正常
xiaoyu9527 · 2016-08-19 19:43:44 +08:00 · 3465 次点击这是一个创建于 2956 天前的主题，其中的信息可能已经有所发展或是发生改变。
2016-08-19 19:39:48 [scrapy] DEBUG: Crawled (404) <GET <a="" href="<a href=" http:="" www.xiumm.cc="" albums="" Goddess-2.html"="" rel="nofollow">http://www.xiumm.cc/albums/Goddess-2.html" rel="nofollow">http://www.xiumm.cc/albums/Goddess-2.html> (referer: None) 2016-08-19 19:39:48 [scrapy] DEBUG: Crawled (404) <GET <a="" href="<a href=" http:="" www.xiumm.cc="" albums="" Goddess-3.html"="" rel="nofollow">http://www.xiumm.cc/albums/Goddess-3.html" rel="nofollow">http://www.xiumm.cc/albums/Goddess-3.html> (referer: None)
http://www.xiumm.cc/albums/TuiGirl-5.html 目标站
求教高手看看那
目前尚无回复
Select Language