在设置了 404 页面的网页,如何才能让连接报错?

2016-10-26 23:20:04 +08:00
 omg21
我在用 urllib.request 抓取网页时用了 try.....except Exception as e: ,让他出错就在屏幕显示出来,然后再继续下一个循环。
可是现在碰到一个问题,就是有些页面不能连接后会转到 404 页面,但是这时就不会触发 except ,导致 urllib.request 会取到 404 页面的代码,后边的程序再分析这个 404 页面,当然分析不出来结果。
像这样的情况应该如何解决?
1769 次点击
所在节点    Python
4 条回复
kamen
2016-10-26 23:31:47 +08:00
不怎么懂 python ,分析出不来结果就丢弃啊
franklinyu
2016-10-26 23:49:43 +08:00
说明网站差, HTTP 协议的正确搞法不是「跳转到 404 页面」,而是返回「 404 代码和 404 页面」。碰到这种网站只好你自己手动检查跳转网址了
karenn
2016-10-26 23:50:58 +08:00
查看一下响应头部的状态码是什么
nccers
2016-10-26 23:52:08 +08:00
看一下 网页内容吗? 如果是 404 直接 raise 一个 exception 就行了

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/315753

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX