ITPub博客

首页 > IT职业 > IT图书 > python爬虫如何配置requests日志输出?

python爬虫如何配置requests日志输出?

IT图书 作者:BonardGalton 时间:2021-09-11 10:07:32 0 删除 编辑

最近写一个代码的时候,需要使用requests从外部系统拿一些数据,外部系统有一些权限认证,又没有SDK,只有自己根据文档写了一个。其中比较麻烦的是发出去的请求没有办法看到request,response所有细节,于是搜索requests的日志打印,并做输出,大家也可以来学习看下。

requests的日志输出

1、配置logging模块,让requests的有效level是DEBUG,使用如下代码来测试requests的日志输出。

2、我们就能看到发出的请求和返回的基本信息了

3、但是里面没有输出request和response的HTTP HEADER信息,定位问题还是比较麻烦,需要通过打开http.client的debuglevel来解决。

4、这样请求和返回的http header都输出了。

python的库基本都有一个logging logger,如果要单独配置,那么需要通过观察里面名字来进行配置哦~好啦,上述对于输出日志也说的很详细,大家多浏览看几遍吧~更多学习内容,尽在python学习网。

来自 “ ITPUB博客 ” ,链接:https://blog.itpub.net/4295/viewspace-2832033/ ,如需转载,请注明出处,否则将追究法律责任。

请登录后发表评论 登录
全部评论

注册时间:2019-08-12

  • 博文量
    89
  • 访问量
    1136