ITPub博客

首页 > IT职业 > IT图书 > python爬虫需要什么模块

python爬虫需要什么模块

IT图书 作者:jerrysun 时间:2021-09-11 10:25:04 0 删除 编辑

Python爬虫我们所需的库

Python的爬虫我们需要安装一下几个库:

1、BeautifulSoup4
2、lxml
3、requests
4、pymongo

requests 库是用来在Python中发出标准的HTTP请求。 它将请求背后的复杂性抽象成一个漂亮,简单的API,以便你可以专注于与服务交

互和在应用程序中使用数据。

Beautiful Soup提供一些简单的、python式的函数用来处理导航、搜索、修改分析树等功能。它是一个工具箱,通过解析文档为用户提

供需要抓取的数据,因为简单,所以不需要多少代码就可以写出一个完整的应用程序。Beautiful Soup自动将输入文档转换为Unicode编

码,输出文档转换为utf-8编码。

推荐学习《python教程》。

来自 “ ITPUB博客 ” ,链接:https://blog.itpub.net/151/viewspace-2835111/ ,如需转载,请注明出处,否则将追究法律责任。

下一篇: mac如何使用python
请登录后发表评论 登录
全部评论

注册时间:2018-09-29

  • 博文量
    122
  • 访问量
    16191