所谓网页抓取，就是把URL地址中指定的网络资源从网络流中读取出来，保存到本地 类似于使用程序模拟IE浏览器的功能，把URL作为。

Beautiful Soup 是用Python写的一个HTMLXML的解析器，它可以很好的处理不规范标记并生成剖析树parse tree它提供简单又常用的导航navigating，搜索以及修改剖析树的操作用urllib或者urllib2推荐将页面的html代码下载。

36 Edg89077445quot 四，调用requests的get接口 response = requestsgeturl，headers=headercontent = responsetext printcontent就能获取到html内容，如果需要更好的解释html标签内容可以使用 BeautifulSoup。

$ sudo apt install pythonpip安装成功，查看PIP版本$ pip V2安装requests模块这里我是通过pip方式进行安装$ pip install requests运行import requests，如果没提示错误，那说明已经安装成功了检验是否安装成功3安装b。

方法步骤 在做爬取数据之前，你需要下载安装两个东西，一个是urllib，另外一个是pythondocx请点击输入图片描述 然后在python的编辑器中输入import选项，提供这两个库的服务 请点击输入图片描述 urllib主要负责抓取网页的数据。