投稿    登录
  《Python3网络爬虫开发实战》赠书活动正在进行中!详情请戳赠书活动!欢迎参与!非常感谢!

[Python3网络爬虫开发实战] 3.1.2-处理异常

Python 崔庆才 8184浏览 28评论

前一节我们了解了请求的发送过程,但是在网络不好的情况下,如果出现了异常,该怎么办呢?这时如果不处理这些异常,程序很可能因报错而终止运行,所以异常处理还是十分有必要的。

urllib的error模块定义了由request模块产生的异常。如果出现了问题,request模块便会抛出error模块中定义的异常。

1. URLError

URLError类来自urllib库的error模块,它继承自OSError类,是error异常模块的基类,由request模块生的异常都可以通过捕获这个类来处理。

它具有一个属性reason,即返回错误的原因。

下面用一个实例来看一下:

我们打开一个不存在的页面,照理来说应该会报错,但是这时我们捕获了URLError这个异常,运行结果如下:

程序没有直接报错,而是输出了如上内容,这样通过如上操作,我们就可以避免程序异常终止,同时异常得到了有效处理。

2. HTTPError

它是URLError的子类,专门用来处理HTTP请求错误,比如认证请求失败等。它有如下3个属性。

  • code:返回HTTP状态码,比如404表示网页不存在,500表示服务器内部错误等。
  • reason:同父类一样,用于返回错误的原因。
  • headers:返回请求头。

下面我们用几个实例来看看:

运行结果如下:

依然是同样的网址,这里捕获了HTTPError异常,输出了reasoncodeheaders属性。

因为URLErrorHTTPError的父类,所以可以先选择捕获子类的错误,再去捕获父类的错误,所以上述代码更好的写法如下:

这样就可以做到先捕获HTTPError,获取它的错误状态码、原因、headers等信息。如果不是HTTPError异常,就会捕获URLError异常,输出错误原因。最后,用else来处理正常的逻辑。这是一个较好的异常处理写法。

有时候,reason属性返回的不一定是字符串,也可能是一个对象。再看下面的实例:

这里我们直接设置超时时间来强制抛出timeout异常。

运行结果如下:

可以发现,reason属性的结果是socket.timeout类。所以,这里我们可以用isinstance()方法来判断它的类型,作出更详细的异常判断。

本节中,我们讲述了error模块的相关用法,通过合理地捕获异常可以做出更准确的异常判断,使程序更加稳健。

转载请注明:静觅 » [Python3网络爬虫开发实战] 3.1.2-处理异常

喜欢 (22)or分享 (0)

我的个人微信公众号,联系我请直接在公众号留言即可~

扫码或搜索:进击的Coder

进击的Coder

微信公众号 扫一扫关注

想结交更多的朋友吗?

来进击的Coder瞧瞧吧

进击的Coder

QQ群号 99350970 立即加入

进击的Coder灌水太多?

这里是纯粹的技术领地

激进的Coder

QQ群号 627725766 立即加入

您的支持是博主写作最大的动力,如果您喜欢我的文章,感觉我的文章对您有帮助,请狠狠点击下面的

发表我的评论
取消评论
表情

Hi,您需要填写昵称和邮箱!

  • 昵称 (必填)
  • 邮箱 (必填)
  • 网址
(28)个小伙伴在吐槽
  1. Here are some hyperlinks to sites that we link to mainly because we assume they may be really worth visiting.
    Google2019-01-16 08:28 (1分钟前)回复
  2. Just beneath, are various absolutely not related internet sites to ours, having said that, they may be surely really worth going over.
    Google2019-01-16 07:45 (43分钟前)回复
  3. that is the finish of this article. Right here youll locate some web pages that we assume you will enjoy, just click the hyperlinks over
    amortization schedule2019-01-15 11:33 (21小时前)回复
  4. although sites we backlink to below are considerably not connected to ours, we feel they are really really worth a go by way of, so have a look
    sexy Melody webcam2019-01-15 01:07 (1天前)回复
  5. Wonderful story, reckoned we could combine a couple of unrelated data, nevertheless genuinely really worth taking a appear, whoa did one master about Mid East has got more problerms also
    sweet Sofia cam2019-01-15 00:15 (1天前)回复
  6. The data mentioned within the article are some of the most beneficial accessible
    sexy Latina duo2019-01-14 16:34 (2天前)回复
  7. we prefer to honor many other internet web-sites around the web, even when they arent linked to us, by linking to them. Underneath are some webpages really worth checking out
    attacco di panico2019-01-14 07:06 (2天前)回复
  8. very couple of internet sites that happen to become in depth beneath, from our point of view are undoubtedly very well worth checking out
    aoc aa183m drivers2019-01-13 18:46 (3天前)回复
  9. below you will discover the link to some web sites that we believe you need to visit
    Free bonus online singapore2019-01-13 07:31 (3天前)回复
  10. please visit the web pages we comply with, which includes this a single, as it represents our picks from the web
    Adult sex free2019-01-12 17:59 (4天前)回复
  11. Every when inside a while we choose blogs that we study. Listed below would be the most up-to-date internet sites that we pick out
    Sexycams2019-01-12 17:25 (4天前)回复
  12. Sites of interest we have a link to
    free porn2019-01-12 01:10 (4天前)回复
  13. The details talked about in the report are a few of the most beneficial offered
    guest house management system2019-01-11 21:27 (4天前)回复
1 2